โมเดลและแพลตฟอร์ม AI

การเปลี่ยนแปลงของ Neurosymbolic: ทำไม LLM ที่บริสุทธิ์ถึงติดปัญหา

mm
เพิ่ม Unite.AI ลงในแหล่งข้อมูลที่คุณต้องการบน Google

อุตสาหกรรม AI กำลังเผชิญกับการเปลี่ยนแปลงที่สำคัญ ซึ่งยังไม่ได้รับการยอมรับอย่างกว้างขวาง ในขณะที่โมเดลภาษาขนาดใหญ่ (LLM) ยังคงครอบงำสาขานี้ วิธีการใหม่กำลังเกิดขึ้นอย่างเงียบๆ วิธีการนี้ซึ่งเรียกว่า Neurosymbolic LLMs ช่วยให้โมเดลภาษาที่ใช้เครือข่ายประสาทสามารถใช้เหตุผลเชิงสัญลักษณ์ในการทำงานได้ ไม่เหมือนกับ LLM ที่บริสุทธิ์ซึ่งพึ่งพาเครือข่ายประสาทในการจดจำรูปแบบ alone Neurosymbolic LLMs แปลงคำสั่งภาษาธรรมชาติเป็นโปรแกรมสัญลักษณ์ก่อน แล้วใช้ตัวแปลสัญลักษณ์ภายนอก เช่น ตัวแปลภาษาโปรแกรมมิ่ง เพื่อทำงานนั้น การบูรณาการนี้ช่วยเพิ่มความสามารถของโมเดลในการจัดการงานที่ซับซ้อน โดยให้ความแม่นยำ ความโปร่งใส และความสามารถในการอธิบายที่ดีขึ้น ในบทความนี้ เราจะสำรวจสาเหตุของการเปลี่ยนแปลงที่เพิ่มขึ้นต่อ LLM ที่ใช้ Neurosymbolic

การล่มสลายของตำนานการปรับขนาด

สัญญาแห่งความหวังของยุค LLM ที่บริสุทธิ์คือเรื่องง่ายๆ: โมเดลที่ใหญ่ขึ้นจะให้ผลลัพธ์ที่ดีขึ้น ความคิดนี้คือว่าด้วยข้อมูลและพลังการประมวลผลที่เพิ่มขึ้น AI จะให้ผลลัพธ์ที่ดีขึ้น ทฤษฎีนี้ทำงานได้ดีเป็นเวลานาน แต่การพัฒนาล่าสุดได้แสดงข้อจำกัดของมัน ตัวอย่างล่าสุดคือ Grok 4 ซึ่งใช้พลังการประมวลผล 100 เท่าของตัวก่อนหน้า แต่ไม่ได้แสดงการปรับปรุงที่สำคัญในมาตรฐานที่ท้าทาย เช่น การทดสอบสุดท้ายของมนุษย์ แม้ว่า Grok 4 จะทำงานได้ดีขึ้นในบางด้าน แต่การปรับปรุงเหล่านั้นยังห่างไกลจากที่คาดหวัง อย่างไรก็ตาม เมื่อเครื่องมือสัญลักษณ์ถูกบูรณาการเข้ากับโมเดลเหล่านี้ การทำงานได้ปรับปรุงอย่างมาก ซึ่งบ่งชี้ว่าการปรับขนาด alone ไม่ใช่คำตอบสำหรับการปรับปรุงประสิทธิภาพของ AI และวิธีการ Neurosymbolic มีศักยภาพที่จะเหนือกว่า LLM ที่บริสุทธิ์

ข้อจำกัดของเครือข่ายประสาทที่บริสุทธิ์

LLM ที่บริสุทธิ์มีข้อจำกัดที่ชัดเจนซึ่งการปรับขนาดไม่สามารถเอาชนะได้ ข้อจำกัดเหล่านี้มาจากวิธีการสร้าง LLM โดยใช้เครือข่ายประสาท ซึ่งพึ่งพาการจดจำรูปแบบเป็นหลัก แม้ว่าจะมีประสิทธิภาพในหลายบริบท แต่การขาดความสามารถในการให้เหตุผลและการใช้เหตุผลเชิงตรรกะทำให้ไม่สามารถทำงานที่ซับซ้อนได้ ตัวอย่างเช่น เมื่อนักวิจัยของ Apple (AAPL ) เพิ่มเงื่อนไขที่ไม่เกี่ยวข้องในโจทย์ทางคณิตศาสตร์ LLM ที่ดีที่สุดจะเห็นความแม่นยำลดลงถึง 65% ในการศึกษาที่เรียกว่า GSM-Symbolic LLMs ทำงานไม่ดีเมื่อตัวเลขถูกสับเปลี่ยนหรือมีเงื่อนไขเพิ่มเติม แม้ว่าจะมีการป้อนข้อมูลภาพที่สมบูรณ์แบบก็ตาม

ตัวอย่างอื่นๆ ของข้อบกพร่องนี้เห็นได้ชัดเจนในการสร้างปัญหากระดานข้ามคำ ChatGPT ซึ่งไม่สามารถเข้าใจโค้ดได้ ต้องดิ้นรนในการทำงาน เช่น การสร้างกริด นำไปสู่ข้อผิดพลาดง่ายๆ เช่น การตระหนักว่า “RCRCT” เป็นคำที่ถูกต้อง ในทางตรงกันข้าม o3 ของ OpenAI ซึ่งใช้โค้ดสัญลักษณ์ สามารถสร้างกริดกระดานข้ามคำได้อย่างถูกต้อง ซึ่งแสดงให้เห็นว่า LLM ที่บริสุทธิ์ไม่สามารถทำงานกระบวนการทางอัลกอริทึมได้อย่างน่าเชื่อถือ ไม่สามารถแยกแยะความสัมพันธ์จากสาเหตุ หรือรักษาความสอดคล้องในการให้เหตุผลหลายขั้นตอน

การเกิดขึ้นของ AI สัญลักษณ์: ความแม่นยำเชิงตรรกะมากกว่าการจดจำรูปแบบ

AI สัญลักษณ์ใช้ระบบที่โปร่งใสและมีกฎเกณฑ์ที่ชัดเจน ซึ่งเข้าใจและตรวจสอบได้ง่าย ไม่เหมือนกับเครือข่ายประสาทที่มักจะไม่โปร่งใส ระบบสัญลักษณ์ให้เส้นทางการให้เหตุผลที่ชัดเจนจากข้อมูลเข้าไปจนถึงข้อสรุป ทำให้ AI สัญลักษณ์เหมาะสำหรับการใช้งานที่ต้องการความโปร่งใสและความรับผิดชอบ

ระบบสัญลักษณ์ยังมีประสิทธิภาพมากกว่า ตัวอย่างเช่น Neuro-Symbolic Concept Learner สามารถบรรลุความแม่นยำสูงโดยใช้เพียง 10% ของข้อมูลที่จำเป็นสำหรับเครือข่ายประสาทแบบดั้งเดิม นอกจากนี้ ระบบสัญลักษณ์ยังสามารถให้คำอธิบายที่อ่านได้สำหรับการตัดสินใจแต่ละครั้ง ซึ่งจำเป็นสำหรับสาขาต่างๆ เช่น การดูแลสุขภาพ การเงิน และกฎหมาย

การศึกษาล่าสุดแสดงให้เห็นถึงประสิทธิผลของวิธีการสัญลักษณ์ในงาน เช่น ปัญหา Tower of Hanoi โดยที่โมเดล เช่น o3 ทำงานได้ดีขึ้นเมื่อใช้โค้ดสัญลักษณ์ ในทำนองเดียวกัน Abductive Rule Learner ที่มีความตระหนักรู้บริบท (ARLC) แสดงความแม่นยำเกือบสมบูรณ์ในโจทย์ทางคณิตศาสตร์ ในขณะที่ LLM ที่บริสุทธิ์ต้องดิ้นรนเพื่อให้ถึงแม่นยำ 10% เมื่อประเด็นนั้นซับซ้อนขึ้น

ความต้องการที่เพิ่มขึ้นสำหรับ AI ที่อธิบายได้

เมื่อกฎระเบียบเกี่ยวกับระบบ AI เพิ่มขึ้น ความต้องการสำหรับ AI ที่อธิบายได้และโปร่งใสจะเพิ่มขึ้น สectors เช่น การดูแลสุขภาพ การเงิน และกฎหมายต้องการระบบ AI ที่สามารถอธิบายการให้เหตุผลของตนได้ AI Neurosymbolic มีความเหมาะสมอย่างยิ่งในการตอบสนองความต้องการเหล่านี้ พระราชบัญญัติ AI ของสหภาพยุโรป และกฎระเบียบอื่นๆ กำลังผลักดันให้บริษัทต่างๆ ใช้ระบบ AI ที่แสดงให้เห็นถึงความรับผิดชอบและความโปร่งใส

นอกจากนี้ ยังเห็นได้ชัดว่าการลงทุนกำลังเปลี่ยนไปสู่ระบบ AI ที่สามารถสร้างสมดุลระหว่างประสิทธิภาพและความสามารถในการอธิบายได้ บริษัทที่ให้คุณค่ากับนวัตกรรมและความไว้วางใจกำลังค้นหาวิธี Neurosymbolic ซึ่งมีความสามารถในการอธิบายการตัดสินใจที่เหนือกว่า

การปรับปรุงความน่าเชื่อถือของ AI ด้วยการบูรณาการ Neurosymbolic

ในขณะที่ LLM ที่บริสุทธิ์ได้พัฒนาอย่างมาก ความน่าเชื่อถือของมันยังคงเป็นปัญหา โดยเฉพาะในด้านที่มีความเสี่ยงสูง เช่น การดูแลสุขภาพ กฎหมาย และการเงิน ความไม่น่าเชื่อถือนี้เกิดจาก LLM ที่พึ่งพาการจดจำรูปแบบและความน่าจะเป็น ซึ่งอาจนำไปสู่ผลลัพธ์ที่ไม่คาดคิดและข้อผิดพลาด LLM Neurosymbolic ซึ่งรวมเครือข่ายประสาทและเหตุผลสัญลักษณ์เข้าด้วยกัน เสนอทางออก โดยใช้ตรรกะเพื่อตรวจสอบและจัดระเบียบข้อมูล LLMs สามารถรับรองว่าการตอบสนองที่สร้างขึ้นมีความแม่นยำและน่าเชื่อถือได้ วิธีการนี้สามารถลดข้อผิดพลาด เพิ่มความโปร่งใส และรักษาความสอดคล้องในการผลิตสัญญาณออกมาได้

LLM Neurosymbolic ในการทำงาน

LLM Neurosymbolic ได้แสดงผลลัพธ์ที่น่าประทับใจในการแก้ไขปัญหาที่ซับซ้อน ระบบของ Google DeepMind เช่น AlphaFold, AlphaProof และ AlphaGeometry รวม LLMs และเหตุผลสัญลักษณ์เพื่อให้ผลลัพธ์ที่โดดเด่นในการพับโปรตีน การพิสูจน์ทางคณิตศาสตร์ และการแก้ปัญหาเรขาคณิต พวกเขาใช้เทคนิคการให้เหตุผลสัญลักษณ์ เช่น การค้นหาและวนซ้ำแบบมีเงื่อนไข ซึ่งเครือข่ายประสาทแบบดั้งเดิมได้ทิ้งไปแล้ว

ความท้าทายและโอกาส

ในขณะที่ LLM Neurosymbolic ได้ทำความก้าวหน้าอย่างมาก ยังมีงานที่ต้องทำอีกมาก การใช้งานปัจจุบัน เช่น การเพิ่มตัวแปลโค้ดเข้ากับ LLMs เสนอความสามารถเชิงหน้าที่ แต่ยังไม่ใช่วิธีแก้ปัญหาที่สมบูรณ์สำหรับการตอบสนองความต้องการของ AI ทั่วไป (AGI) ความท้าทายที่แท้จริงคือการพัฒนาระบบที่ส่วนประกอบประสาทและสัญลักษณ์ทำงานร่วมกันอย่างราบรื่น โดยให้เครื่องจักรสามารถให้เหตุผลและเข้าใจโลกเหมือนมนุษย์ เป้าหมายหนึ่งของ LLM Neurosymbolic ในอนาคตคือการทำให้สามารถบูรณาการได้อย่างมีประสิทธิภาพกับโหมดการให้เหตุผลที่แตกต่างกันโดยไม่สูญเสียความสอดคล้อง

ข้อสรุป

การเกิดขึ้นของ AI Neurosymbolic คือการเปลี่ยนแปลงแนวคิดในการพัฒนา AI ในขณะที่ LLM ที่บริสุทธิ์ได้พิสูจน์ประสิทธิภาพในหลายๆ ด้าน แต่ก็ถูกจำกัดด้วยการขาดความสามารถในการให้เหตุผลและการพึ่งพาการจดจำรูปแบบ วิธีการ Neurosymbolic ที่รวม LLMs และเหตุผลสัญลักษณ์เข้าด้วยกัน เสนอข้อดีหลายประการในด้านความแม่นยำ ความโปร่งใส และความสามารถในการอธิบาย ระบบ Neurosymbolic มีความโดดเด่นในงานที่ต้องการการให้เหตุผลที่ซับซ้อน ความแม่นยำเชิงตรรกะ และความสามารถในการอธิบาย คุณลักษณะเหล่านี้มีความสำคัญอย่างยิ่งในอุตสาหกรรมที่มีการควบคุม เช่น การดูแลสุขภาพ การเงิน และกฎหมาย ด้วยความต้องการที่เพิ่มขึ้นสำหรับ AI ที่โปร่งใสและรับผิดชอบ AI Neurosymbolic กำลังกลายเป็นวิธีแก้ปัญหาที่สำคัญสำหรับการพัฒนาระบบที่น่าเชื่อถือและเข้าใจได้มากขึ้น อย่างไรก็ตาม ยังมีความท้าทายในการบูรณาการส่วนประกอบประสาทและสัญลักษณ์อย่างสมบูรณ์ และจะต้องมีการนวัตกรรมอย่างต่อเนื่องเพื่อสร้างระบบที่สามารถให้เหตุผลได้อย่างมีประสิทธิภาพข้ามโหมดต่างๆ

ดร. Tehseen Zia เป็น Professor ที่ COMSATS University Islamabad โดยได้รับ PhD ใน AI จาก Vienna University of Technology, Austria มีเชี่ยวชาญด้าน Artificial Intelligence, Machine Learning, Data Science, และ Computer Vision โดยมีส่วนร่วมที่สำคัญด้วยการเผยแพร่ในวารสารวิทยาศาสตร์ที่มีชื่อเสียง ดร. Tehseen ยังได้ดำเนินโครงการอุตสาหกรรมต่างๆ ในฐานะ Principal Investigator และให้บริการเป็นที่ปรึกษาด้าน AI