Appen Limited เปิดตัวชุดข้อมูลฝึกอบรมที่หลากหลายสำหรับ NLP

Appen Limited ผู้ให้บริการข้อมูลฝึกอบรมคุณภาพสูงสำหรับบริษัทที่ต้องการสร้างระบบ AI ในระดับใหญ่ ได้เปิดตัวชุดข้อมูลฝึกอบรมใหม่ที่หลากหลายสำหรับโครงการ NLP (การประมวลผลภาษาแบบธรรมชาติ) ชุดข้อมูลเหล่านี้จะช่วยให้ผู้ใช้สุดท้ายได้รับประสบการณ์ที่เหมือนกันไม่ว่าจะเป็นภาษาใด ภาษาถิ่น อักขระ เสียง หรือเพศ

ตามรายงานของ PNAS ในเดือนมีนาคม 2020 ระบบการรับเสียงอัตโนมัติที่ได้รับความนิยม โดยเฉพาะระบบที่ใช้สำหรับวิดิจิตอลแอสซิสต์ント การปิดคำบรรยาย และการคำนวณแบบไม่ใช้มือ มักแสดงให้เห็นถึงความแตกต่างทางเชื้อชาติในการทำงาน ส่วนใหญ่เกิดจากการที่ระบบเหล่านี้ถูกสร้างขึ้นจากข้อมูลที่มีอคติหรือไม่สมบูรณ์ และนี่คือเหตุผลที่การสร้างชุดข้อมูลฝึกอบรมที่หลากหลายเป็นสิ่งจำเป็น

ด้วยการเปิดตัวใหม่นี้ Appen มีเป้าหมายที่จะลดความแตกต่างในการทำงานและสร้างสภาพแวดล้อมที่ครอบคลุมมากขึ้นสำหรับเทคโนโลยีการรับเสียง การท้าทายแบบเดียวกันนี้ก็เกิดขึ้นในระบบการแปลภาษาและระบบ NLP เช่นกัน

Mark Brayan เป็น CEO ของ Appen

“คุณภาพและความหลากหลายของข้อมูลฝึกอบรมส่งผลกระทบโดยตรงต่อประสิทธิภาพและอคติที่มีอยู่ในโมเดล AI” Brayan กล่าว “ในฐานะพันธมิตรข้อมูล เราสามารถจัดหาข้อมูลฝึกอบรมที่สมบูรณ์สำหรับกรณีการใช้งานต่างๆ เพื่อให้แน่ใจว่าโมเดล AI ทำงานสำหรับทุกคน มันสำคัญที่เราจะต้องมีส่วนร่วมในกลุ่มบุคคลที่หลากหลายเพื่อสร้าง ผลิต และตรวจสอบข้อมูลเพื่อให้แน่ใจว่าโมเดลที่กำลังฝึกอบรมไม่เพียงแต่เท่าเทียมกัน แต่ยังสร้างขึ้นอย่างมีความรับผิดชอบ”

โครงการภาษาของ Appen

Appen พยายามที่จะสร้างสภาพแวดล้อม AI ที่หลากหลายผ่านโครงการและความร่วมมือต่างๆ รวมถึง:

• ความร่วมมือกับ Translators without Borders (TWB): Appen ได้ร่วมมือกับ TWB, Amazon (AMZN ), Carnegie Mellon University, Facebook (META ), Google (GOOGL ), Johns Hopkins University, Microsoft (MSFT ) และ Translated ความร่วมมือนี้ได้เข้าร่วมใน Translation Initiative for COVID-19 (TICO-19) ซึ่งพยายามที่จะขยายการเข้าถึงข้อมูลเกี่ยวกับ COVID-19 โดยการสนับสนุนการพัฒนาเทคโนโลยีภาษาในหลายภาษา รวมถึงภาษาที่ใช้ในประเทศกำลังพัฒนา เช่น Congolese Swahili, Tigrinya และ Nigerian Fulfulde
• โครงการแปลภาษาแคนาดา-ฝรั่งเศส: Appen ช่วยให้ Microsoft เพิ่มภาษา “Canadian French” ใน Microsoft Translator หลังจากที่ได้ประสานงานกับผู้ให้คำปรึกษาภาษาประจำชาติ
• โครงการแปลภาษา Inuktitut: Appen ได้ร่วมมือกับรัฐบาล Nunavut ซึ่งช่วยให้ Microsoft เพิ่มภาษา Inuktitut ใน Microsoft Translator ภาษา Inuktitut เป็นภาษาที่ใช้กันในแคนาดาแอร์กติก
• ชุดข้อมูล OTS สำหรับภาษา African American Vernacular English (AAVE): โดยการทำงานร่วมกับผู้พูดภาษา AAVE และรวบรวมข้อมูลสำหรับชุดข้อมูล OTS ที่อาศัยการอภิปรายหัวข้อต่างๆ Appen พยายามที่จะสร้างชุดข้อมูลฝึกอบรมใหม่ที่แสดงถึงภาษา AAVE

Dr. Judith Bishop เป็น Senior Director of AI Specialists ที่ Appen

“ข้อมูล AI ที่มีอคติอาจทำให้โครงการล้มเหลวในการให้ผลลัพธ์ที่คาดหวังและอาจก่อให้เกิดอันตรายต่อบุคคลที่ควรได้รับประโยชน์” Dr. Bishop กล่าว “ความซับซ้อนและขนาดของโครงการ AI ทำให้บริษัทส่วนใหญ่ไม่สามารถรวบรวมข้อมูลที่ไม่มีอคติและคุณภาพสูงได้โดยไม่ต้องร่วมมือกับผู้เชี่ยวชาญข้อมูล AI Appen มีความมุ่งมั่นที่จะพัฒนาเครือข่ายผู้ให้ข้อมูลที่หลากหลายและเชี่ยวชาญที่สุด ซึ่งให้ทรัพยากรที่แตกต่างชัดเจนสำหรับการสร้างโครงการ AI ที่ยุติธรรมและรับผิดชอบ”

Appen ได้รับการช่วยเหลือจากผู้ให้ข้อมูลฝึกอบรมจากกว่า 170 ประเทศ และภาษาที่แสดงถึง 235 ภาษาและ 395 ภาษาถิ่น นอกจากนี้ยังมีชุดข้อมูล OTS ที่ช่วยให้ธุรกิจสามารถรวบรวมข้อมูลฝึกอบรมคุณภาพสูงได้เร็วขึ้นสำหรับโครงการ AI ของตน