AI Evaluation: ทำไมการวัดผล AI สำคัญกว่าการเลือกโมเดล
หลายองค์กรใช้เวลามากกับการเปรียบเทียบโมเดล แต่กลับใช้เวลาน้อยมากในการวัดผลลัพธ์ของ AI หลังนำไปใช้งานจริง
โมเดลเก่ง ไม่ได้เท่ากับ ระบบเก่ง
โมเดลที่ได้คะแนนสูงบน Benchmark อาจทำงานได้ไม่ดีในองค์กรของเรา
ตัวอย่างเช่น
AI สำหรับตอบคำถามพนักงาน
แม้โมเดลจะเก่งด้านภาษา