AI เจอโจทย์หนักในเกมกลยุทธ์เทิร์นเบส

CivBench เป็นแพลตฟอร์มที่นำเกม 'Civilization 6' ซึ่งขึ้นชื่อว่ายากที่สุดในบรรดาเกมกลยุทธ์เทิร์นเบส มาใช้วัดความสามารถของ AI ในการวางแผนระยะยาวและตัดสินใจภายใต้ความไม่แน่นอน

ผลลัพธ์แสดงให้เห็นว่าแม้ AI จะมีสามารถในการแข่งขันเกมที่มีกติกาชัดเจนอย่างหมากรุกได้ระดับมนุษย์ระดับโลก แต่ในเกมที่ต้องจัดการทรัพยากรหลากหลาย เจรจาต่อรองกับผู้เล่นรายอื่น และปรับแผนตามสถานการณ์ที่เปลี่ยนแปลงแบบเปิดแบบนี้ ยังคงเป็นความท้าทายขนาดใหญ่

สะท้อนข้อจำกัดด้านการวางแผนระยะยาว

อัตราชนะเพียงราว 13% จาก 23 นัด ชี้ว่าการให้เหตุผลเชิงกลยุทธ์และการตัดสินใจหลายชั้นยังเป็นจุดอ่อนของโมเดล AI ยุคปัจจุบัน อย่างไรก็ดี การที่ AI ชนะได้ 3 นัดก็แสดงว่าความสามารถด้านนี้มีพัฒนาการที่วัดผลได้

ผลการประเมินฉบับรายงานพร้อมหลักฐานประกอบในรูปแบบ HTML และ PNG ถูกเผยแพร่เป็นไฟล์รายงาน factcheck บนที่เก็บข้อมูลออนไลน์ โดยอ้างอิงแหล่งข้อมูลหลักจำนวน 7 รายการ

สรุปได้ว่าผลการทดสอบที่ AI ลงแข่ง 'Civilization 6' 23 นัด แพ้ 20 นัดนั้น เป็นจริง