วัดผล 17,000 รัน: Claude, Codex และ Cursor เลือกไลบรารีและบริการต่างกันแค่ไหน
Which tools do Claude, Codex and Cursor choose? We measured 17k runs to find out
ทีมวิจัย Armature เผยแพร่ผลการศึกษาเมื่อวันที่ 3 กันยายน 2026 โดยวิเคราะห์ 16,893 เซสชันของเครื่องมือเขียนโค้ดด้วย AI สามตัวคือ Claude Code, Codex และ Cursor เพื่อดูว่าเมื่อสั่งให้เพิ่มฟีเจอร์หนึ่ง ๆ agent จะเลือกไลบรารีหรือบริการภายนอกตัวไหน การทดลองครอบคลุม 75 repository ใน 10 ภาษาโปรแกรม และคำสั่งที่ผันแปร 1,163 แบบเพื่อจำลองบุคลิกนักพัฒนาที่ต่างกัน
ผลที่โดดเด่นที่สุดคือทั้งสามตัวเลือกตรงกันเพียง 42% ของกรณี ตัวอย่างเช่นงาน voice agent Claude Code เลือก Twilio ขณะที่ Codex เลือก OpenAI Realtime API และ Cursor เลือก Vapi ซึ่งแปลว่าคำสั่งเดียวกันแต่คนละเครื่องมือ จะได้สแตกที่ต่างกันคนละทาง
แหล่งข้อมูลที่แต่ละตัวใช้ก็ต่างกันมาก Codex ค้นเว็บถึง 94% ของกรณีและใช้ operator เจาะจง Cursor พึ่งผลค้นหาราวสองในสามของเซสชัน ส่วน Claude Code อาศัยข้อมูลจากการเทรนเป็นหลัก ค้นเว็บเพียงราว 30% เท่านั้น
ภาษาและเฟรมเวิร์กของโปรเจกต์ก็มีผลชัดเจน เมื่อสั่งงานเดียวกันกับ repository ต่างภาษา ผู้ชนะฝั่งผู้ให้บริการอีเมลเปลี่ยนไปตามสแตก โดย Resend ครองฝั่ง TypeScript, Sendgrid นำใน Python, Postmark ชนะใน Go และ Azure ACS ชนะในงาน Java
อีกข้อค้นพบที่สำคัญคือการถูกเอ่ยถึงไม่เท่ากับการถูกเลือก PayPal ถูกกล่าวถึง 139 ครั้งแต่ไม่เคยถูกเลือกเลย ส่วน LangChain ถูกกล่าวถึง 194 ครั้งแต่ถูกเลือกเพียง 4 ครั้ง ขณะที่ตลาดบางหมวดกระจุกตัวสูงมาก Stripe ชนะงานชำระเงิน 90% Neon ครองฝั่งฐานข้อมูล 66% และ Amazon S3 ครองการเก็บไฟล์ 45% ทีมวิจัยเปิดชุดข้อมูลและ trace ทั้งหมดให้ตรวจสอบได้