إطلاق أبين ليميتد لمجموعات بيانات تدريبية متنوعة لتعلم اللغة الطبيعية

أبين ليميتد، وهي شركة رائدة في توفير بيانات تدريبية عالية الجودة للشركات التي تبحث عن بناء أنظمة ذكاء اصطناعي بمقياس كبير، تطلق مجموعات بيانات تدريبية جديدة ومتنوعة لمبادرات تعلم اللغة الطبيعية (NLP). ستسمح هذه المجموعات للمستخدمين النهائيين بالحصول على نفس الخبرة بغض النظر عن تنوع اللغة أو اللهجة أو العرق أو الجنس.

وفقًا لتقرير من PNAS في مارس 2020، فإن أنظمة التعرف على الكلام الآلي الشهيرة، خاصة تلك المستخدمة في المساعدين الافتراضيين وترجمة الصوت والكمبيوتر بدون استخدام اليدين، غالبًا ما تظهر اختلافات عرقية في الأداء. veel من هذا يعود إلى أن الأنظمة تستند إلى بيانات متحيزة أو غير كاملة، وهذا هو السبب في أهمية تطوير مجموعات تدريبية متنوعة.

مع الإطلاق الجديد، تهدف أبين إلى تقليل الفروق في الأداء وخلق بيئة أكثر شمولية لتقنية التعرف على الصوت. تحدث نفس التحديات في أنظمة تفسير اللغة وأنظمة NLP.

مارك برايان هو الرئيس التنفيذي لأبين.

“جودة وتنوع بيانات التدريب يؤثران مباشرة على أداء ووجود تحيز في نماذج الذكاء الاصطناعي”، قال برايان. “كشريك بيانات، يمكننا توفير بيانات تدريبية كاملة ل nhiều حالات استخدام لضمان أن تعمل نماذج الذكاء الاصطناعي للجميع. من الحاسم أن ننخرط مع مجموعة متنوعة من الأفراد لإنتاج وتصنيف وتحقق من صحة البيانات لضمان أن النموذج قيد التدريب ليس فقط عادلاً ولكن أيضًا مبنيًا بشكل مسؤول”.

مشاريع أبين للغة

تพยأ أبين لخلق بيئة ذكاء اصطناعي متنوعة من خلال مشاريعها وشراكاتها المختلفة، بما في ذلك:

• شراكة مترجمون بلا حدود (TWB): أبين قد شرعت في شراكة مع TWB وآماون وكارنيغي ميلون وجوجل وجونز هوبكنز ومايكروسوفت وترجمات. انضمت الشراكة إلى مبادرة الترجمة لفيروس كورونا (TICO-19)، والتي حاولت توسيع الوصول إلى معلومات فيروس كورونا من خلال دعم تطوير تكنولوجيا اللغة في العديد من اللغات. تشمل هذه اللغات دولًا نامية مثل سواحيلي الكونغولي والتغرينية والفولاني النيجيري.
• مشروع ترجمة الفرنسية الكندية: ساعدت أبين مايكروسوفت على إضافة “الفرنسية الكندية” كخيار لغة في مترجم مايكروسوفت بعد التنسيق مع مستشارين لغة أصليين.
• مشروع ترجمة إنكتيتوت: تعاونت أبين مع حكومة نونافوت، مما ساعد على إضافة إنكتيتوت إلى مترجم مايكروسوفت. يتحدث هذه اللغة الأصلية في القطب الشمالي الكندي.
• مجموعات بيانات جاهزة للهجاء الأمريكي الأفريقي (AAVE): من خلال العمل مع متحدثي AAVE وجمع البيانات لمجموعة بيانات جاهزة dựa على محادثات حول مواضيع مختلفة، تحاول أبين إنشاء مجموعات بيانات تدريبية جديدة تمثل AAVE.

الدكتورة جوديث بيشوب هي المدير التنفيذي لمتخصصي الذكاء الاصطناعي في أبين.

“البيانات المتحيزة للذكاء الاصطناعي تؤدي إلى مشاريع قد تفشل في تحقيق النتائج التجارية المتوقعة وتؤذي الأفراد الذين من المفترض أن يستفيدوا منها”، قالت الدكتورة بيشوب. “مقياس ومجمع مشاريع الذكاء الاصطناعي يجعل من المستحيل على معظم الشركات الحصول على بيانات غير متحيزة وعالية الجودة دون الشراكة مع خبير بيانات الذكاء الاصطناعي. التزام أبين بتطوير مجموعة متنوعة ومختصة من معدلي البيانات يوفر للصناعة موردًا متميزًا明显 للبناء مشاريع ذكاء اصطناعي عادلة ومتحمسة”.

أبين مدعومة بمعدلي بيانات تدريبية من أكثر من 170 دولة، وتشمل تمثيلات اللغة 235 لغة فريدة و395 لهجة. كما تقدم مجموعات بيانات جاهزة (OTS)، مما يسمح للشركات بتحقيق بيانات تدريبية عالية الجودة بشكل أسرع لمشاريع الذكاء الاصطناعي.