รับ Brief ฟรี
← กลับไป Wire

Live AI Wire

OpenAI เปิดแนวทางประเมิน AI ตัวจริง ตรวจสอบความสามารถและความปลอดภัย

OpenAI ปล่อยคู่มือวิธีประเมิน AI model ระดับ frontier อย่างไม่ลำเอียง ครอบคลุมการวัดความสามารถ safeguard และความถูกต้องของการทดสอบ พร้อมกับเห็นว่าวงการเริ่มสร้าง benchmark ใหม่ เช่น ITBench-AA และ EVA-Bench ที่ทดสอบงาน agentic จริงๆ ไม่ใช่แค่ benchmark ทั่วไป ซึ่งแสดงว่า frontier model ยังมีช่องว่างใหญ่ในงาน enterprise IT ที่ซับซ้อน

05 มิ.ย. 2569 00:13 3 แหล่งข่าว AI สรุปภาษาไทย
arXiv — cs.AIOpenAI BlogHugging Face Blog

ประเด็นที่ควรจับตา

  • OpenAI เผยแนวทางประเมิน third-party อย่างเป็นระบบ ครอบคลุม capability, safeguard, validity
  • Frontier model ทั้งหมดยังได้คะแนนต่ำกว่า 50% ในงาน agentic enterprise IT ที่ซับซ้อน
  • Benchmark ใหม่ (ITBench-AA, EVA-Bench, open-world eval) เน้นงานจริงยาวนาน ไม่ใช่ task ที่ optimize ง่าย