นักวิจัยพัฒนาชุดคำถามที่สามารถทำให้คอมพิวเตอร์ที่ดีที่สุดสับสนได้

นักวิจัยจากมหาวิทยาลัยแมริแลนด์สามารถสร้างชุดคำถามที่คนสามารถตอบได้ง่าย แต่ระบบคอมพิวเตอร์ที่ดีที่สุดในปัจจุบันไม่สามารถตอบได้ ทีมงานสร้างคำถามเหล่านี้ผ่านการทำงานร่วมกันระหว่างมนุษย์และคอมพิวเตอร์ และสามารถสร้างฐานข้อมูลที่มีคำถามมากกว่า 1,200 คำถาม หากระบบคอมพิวเตอร์สามารถเรียนรู้และทำความเข้าใจคำถามเหล่านี้ได้ จะมีความเข้าใจภาษาของมนุษย์ที่ดีที่สุดในบรรดาระบบคอมพิวเตอร์ที่มีอยู่ในปัจจุบัน

งานวิจัยนี้ได้รับการตีพิมพ์ในบทความวิจัยในหนังสือวารสาร Transactions of the Association for Computational Linguistics.

จอร์ดัน บอยด์-การ์เบอร์ ผู้ช่วยศาสตราจารย์ภาควิชาวิทยาการคอมพิวเตอร์จากมหาวิทยาลัยแมริแลนด์และผู้เขียนบทความหลัก ได้พูดถึงการวิจัยใหม่นี้

“ระบบคอมพิวเตอร์ที่ตอบคำถามส่วนใหญ่ไม่สามารถอธิบายว่าทำไมจึงตอบคำถามในแบบที่พวกเขาทำ แต่งานของเราช่วยให้เราเห็นว่าคอมพิวเตอร์เข้าใจอะไรจริงๆ” เขากล่าว “นอกจากนี้ เราได้สร้างฐานข้อมูลเพื่อทดสอบระบบภาษาของคอมพิวเตอร์ ซึ่งจะช่วยให้เราเห็นว่าระบบภาษาของคอมพิวเตอร์สามารถอ่านและประมวลผลข้อมูลได้เหมือนมนุษย์หรือไม่”

ปัจจุบัน คำถามสำหรับโปรแกรมและระบบเหล่านี้ถูกสร้างโดยมนุษย์หรือคอมพิวเตอร์ แต่ปัญหาก็คือเมื่อมนุษย์เป็นผู้สร้างคำถาม พวกเขาอาจไม่ทราบถึงองค์ประกอบต่างๆ ของคำถามที่ทำให้คอมพิวเตอร์สับสน ในขณะที่ระบบคอมพิวเตอร์ใช้สูตร ตั้งคำถามแบบเติมคำ หรือทำผิดพลาด ซึ่งสามารถสร้างคำถามที่ไม่มีความหมายได้

เพื่อให้ได้รับการทำงานร่วมกันระหว่างมนุษย์และคอมพิวเตอร์ที่ช่วยให้สามารถสร้างคำถามได้ บอยด์-การ์เบอร์และทีมงานวิจัยได้สร้างอินเทอร์เฟซคอมพิวเตอร์พิเศษ ตามที่พวกเขาอธิบาย อินเทอร์เฟซนี้สามารถบอกได้ว่าคอมพิวเตอร์กำลัง “คิด” อะไรในขณะที่มนุษย์กำลังพิมพ์คำถาม ผู้เขียนสามารถแก้ไขและเปลี่ยนคำถามตามความอ่อนแอของคอมพิวเตอร์ได้ ซึ่งสามารถสร้างความสับสนให้กับคอมพิวเตอร์ได้

เมื่อผู้เขียนพิมพ์คำถาม คอมพิวเตอร์จะแสดงคำตอบที่เป็นไปได้ในลำดับ และคำที่ทำให้คอมพิวเตอร์ตอบคำถามนั้นจะถูกเน้น

ระบบสามารถตอบคำถามได้อย่างถูกต้อง และอินเทอร์เฟซจะเน้นคำหรือวลีที่ทำให้คอมพิวเตอร์ตอบคำถามนั้นได้ ด้วยข้อมูลนี้ ผู้เขียนสามารถแก้ไขคำถามเพื่อให้คอมพิวเตอร์ตอบได้ยากขึ้น แต่ยังคงความหมายเดิม ในขณะที่คอมพิวเตอร์จะสับสน แต่ผู้เชี่ยวชาญสามารถตอบคำถามได้

เมื่อมนุษย์และคอมพิวเตอร์ทำงานร่วมกัน พวกเขาสามารถสร้างคำถามคอมพิวเตอร์ได้ 1,213 คำถามที่คอมพิวเตอร์ไม่สามารถตอบได้ ทีมงานวิจัยได้ทดสอบคำถามเหล่านี้ในการแข่งขันระหว่างผู้เล่นมนุษย์และคอมพิวเตอร์ ผู้เล่นมนุษย์รวมถึงทีมไตรวิทย์ระดับมัธยมและผู้ชนะการแข่งขัน “Jeopardy!” ทีมมนุษย์ที่อ่อนแอที่สุดสามารถเอาชนะระบบคอมพิวเตอร์ที่แข็งแกร่งที่สุดได้

ชิ เฟิง นักศึกษาระดับบัณฑิตศึกษาจากมหาวิทยาลัยแมริแลนด์และผู้ร่วมเขียนบทความ ได้พูดถึงการวิจัยใหม่นี้

“เป็นเวลา 3-4 ปีแล้วที่ผู้คนตระหนักว่าระบบคอมพิวเตอร์ที่ตอบคำถามมีความอ่อนแอและสามารถถูกหลอกได้ง่าย” เธอกล่าว “แต่นี่เป็นบทความแรกที่เราได้เห็นว่าใช้เครื่องจักรเพื่อช่วยให้มนุษย์ทำลายแบบจำลองนี้”

คำถามที่ใช้ในการวิจัยสามารถเปิดเผยปรากฏการณ์ทางภาษา 6 ประเภทที่ทำให้คอมพิวเตอร์สับสน ซึ่งแบ่งออกเป็น 2 ประเภท ประเภทแรกคือปรากฏการณ์ทางภาษา ซึ่งรวมถึงการเขียนใหม่ ภาษาที่ทำให้สับสน และบริบทที่ไม่คาดคิด ประเภทที่สองคือทักษะการให้เหตุผล ซึ่งรวมถึงตรรกะและการคำนวณ การใช้เหตุผลเชิงรูปธรรม และการรวมขั้นตอนต่างๆ เพื่อสร้างข้อสรุป

“มนุษย์สามารถสรุปและเห็นความเชื่อมโยงที่ลึกซึ้งได้” บอยด์-การ์เบอร์กล่าว “พวกเขาไม่มีความจำที่ไม่มีขอบเขตเหมือนคอมพิวเตอร์ แต่พวกเขายังคงมีความสามารถในการเห็นภาพรวมและไม่สับสน”

การวิจัยนี้เป็นรากฐานสำหรับระบบคอมพิวเตอร์ที่จะสามารถทำความเข้าใจภาษาของมนุษย์ได้ในอนาคต และจะยังคงพัฒนาและปรับปรุงอย่างแน่นอน

“บทความนี้เป็นการวางแผนการวิจัยสำหรับหลายปีที่จะมาถึง เพื่อให้เราสามารถสร้างระบบคอมพิวเตอร์ที่สามารถตอบคำถามได้ดี” บอยด์-การ์เบอร์กล่าว