يمكن أن تساعد الذكاء الاصطناعي الباحثين في تحديد الأوراق التي يمكن تكرارها، وتهدف إلى معالجة أزمة التكرار

يتزايد الاهتمام في السنوات الأخيرة بما يسميه العلماء والباحثون أزمة التكرار / الإعادة. فالكثير من الدراسات ببساطة تفشل في إعطاء نفس النتائج المهمة عند محاولة تكرار الدراسة، ونتيجة لذلك، فإن المجتمع العلمي قلق من أن النتائج غالبًا ما تكون مبالغًا فيها. يتأثر المشكلة بمجالات متنوعة مثل علم النفس والذكاء الاصطناعي. عندما يتعلق الأمر بمجال الذكاء الاصطناعي، يتم نشر العديد من الأوراق غير المراجعة التي تدعي نتائج مثيرة للإعجاب التي لا يستطيع باحثون آخرون إعادة إنتاجها. من أجل معالجة المشكلة وتقليل عدد الدراسات غير القابلة للتكرار، صمم الباحثون نموذجًا للذكاء الاصطناعي يهدف إلى تحديد الأوراق التي يمكن تكرارها.

كما ذكرت مجلة فورتشن، نشر فريق من الباحثين من مدرسة كيلوج لإدارة الأعمال ومعهد الأنظمة المعقدة في جامعة نورث وسترن ورقة جديدة ورقة تقدم نموذجًا للتعلم العميق يمكنه потенسيально تحديد الدراسات التي من المحتمل أن تكون قابلة للتكرار، والدراسات التي لا يمكن تكرارها. إذا كان نظام الذكاء الاصطناعي يمكنه بثبات التمييز بين الدراسات القابلة للتكرار والدراسات غير القابلة للتكرار، يمكنه مساعدة الجامعات والمعاهد البحثية والشركات وغيرها من الكيانات في فرز آلاف الأوراق البحثية لتحديد الأوراق التي من المحتمل أن تكون مفيدة وموثوقة.

النظام الذي طوره فريق نورث وسترن لا يستخدم النوع نفسه من الأدلة التجريبية / الإحصائية التي يستخدمها الباحثون عادة لتحديد صحة الدراسات. النموذج يستخدم في الواقع تقنيات معالجة اللغة الطبيعية لمحاولة量ification موثوقية ورقة. النظام يستخرج الأنماط في اللغة المستخدمة من قبل مؤلفي ورقة، ووجد أن بعض أنماط الكلمات تشير إلى موثوقية أكبر.

استخدم فريق البحث أبحاثًا نفسية قديمة مثل années الستين، والتي وجدت أن الناس غالبًا ما يتواصلون بمستوى الثقة التي لديهم في أفكارهم من خلال الكلمات التي يستخدمونها. متابعًا هذه الفكرة، فكر الباحثون في أن مؤلفي الأوراق قد يرسلون بدون وعي إشارات إلى ثقتهم في نتائج بحثهم عند كتابة أوراقهم. قام الباحثون بتدريبين، باستخدام مجموعات بيانات مختلفة. في البداية، تم تدريب النموذج على ما يقرب من مليوني ملخص من الأوراق العلمية، بينما تم تدريب النموذج في المرة الثانية على أوراق كاملة من مشروع يهدف إلى تحديد ما إذا كانت أوراق علم النفس يمكن تكرارها – مشروع التكرار: علم النفس.

بعد الاختبار، قام الباحثون بتشغيل النموذج على مجموعة من مئات الأوراق الأخرى، التي تم أخذها من مجالات مختلفة مثل علم النفس والاقتصاد. وجد الباحثون أن نموذجهم أعطى تنبؤًا أكثر موثوقية بشأن تكرار ورقة من التقنيات الإحصائية التي تستخدم عادة لتحديد ما إذا كانت نتائج ورقة يمكن تكرارها.

أوضح أستاذ إدارة الأعمال في مدرسة كيلوج، بريان أوزي، لمجلة فورتشن أنه بينما يأمل في أن يتم استخدام نموذج الذكاء الاصطناعي في يوم ما لمساعدة الباحثين في تحديد مدى احتمال تكرار النتائج، فإن فريق البحث غير متأكد من الأنماط والتفاصيل التي تعلمها نموذجهم. حقيقة أن نماذج التعلم الآلي غالبًا ما تكون صناديق سوداء هي مشكلة شائعة في أبحاث الذكاء الاصطناعي، ولكن هذه الحقيقة قد تجعل علماء آخرين مترددون في استخدام النموذج.

أوضح أوزي أن فريق البحث يأمل في أن يتم استخدام النموذج في يوم ما لمعالجة أزمة كورونا، لمساعدة العلماء على فهم الفيروس بسرعة أكبر وتحديد ما إذا كانت نتائج الدراسات واعدة. كما قال أوزي لمجلة فورتشن:

“نريد أن نبدأ في تطبيق هذا على قضية كورونا – قضية الآن حيث أصبحت العديد من الأشياء مرتخية، ونحن بحاجة إلى بناء أساس قوي من العمل السابق. من غير الواضح ما هو العمل السابق الذي سيتكرر أو لا، ولا لدينا وقت للتكرار.”

يأمل أوزي والباحثون الآخرون في تحسين النموذج من خلال استخدام تقنيات معالجة اللغة الطبيعية الإضافية، بما في ذلك التقنيات التي أنشأها الفريق لتحليل نصوص المكالمات المتعلقة بأرباح الشركات. لقد بنى فريق البحث بالفعل قاعدة بيانات تضم حوالي 30,000 نص مكالمة سوف يفحصونها لتحديد أدلة. إذا تمكن الفريق من بناء نموذج ناجح، فقد يكونون قادرين على إقناع المحللين والمستثمرين باستخدام الأداة، والتي قد تمهد الطريق لاستخدامات مبتكرة أخرى للنموذج وتقنياته.