ما هو NLU (فهم اللغة الطبيعية)?

فهم اللغة الطبيعية (NLU) هو مفهوم تقني داخل موضوع أكبر من معالجة اللغة الطبيعية. NLU هو العملية المسؤولة عن ترجمة الكلمات الطبيعية البشرية إلى تنسيق يمكن للكمبيوتر تفسيره. في الأساس، قبل أن يتمكن الكمبيوتر من معالجة بيانات اللغة، يجب أن يفهم البيانات.

تتضمن تقنيات NLU استخدام القواعد النحوية الشائعة والقواعد النحوية لتمكين الكمبيوتر من فهم المعنى والسياق للغة البشرية الطبيعية. الهدف النهائي لهذه التقنيات هو أن يصل الكمبيوتر إلى فهم “直觉ي” للغة، قادر على الكتابة وفهم اللغة بالطريقة التي يفعلها الإنسان، دون الرجوع باستمرار إلى تعريفات الكلمات.

تعريف NLU (فهم اللغة الطبيعية)

هناك العديد من التقنيات التي يستخدمها علماء الحاسوب وخبراء معالجة اللغة الطبيعية لتمكين الكمبيوتر من فهم اللغة البشرية. większość من هذه التقنيات تقع في فئة “التحليل النحوي”. وتشمل تقنيات التحليل النحوي:

• التنقيح
• التنقية
• تقسيم الكلمات
• التحليل
• التنقيح الشكلي
• كسر الجمل
• تعليم جزء الكلام

تطبق تقنيات التحليل النحوي القواعد النحوية على مجموعات من الكلمات وتحاول استخدام هذه القواعد لاستخراج المعنى. في المقابل، يعمل NLU باستخدام تقنيات “التحليل الدلالي”.

يطبق التحليل الدلالي الخوارزميات الحاسوبية على النص، محاولاً فهم معنى الكلمات في سياقها الطبيعي، بدلاً من الاعتماد على نهج قائم على القواعد. لا يوجد بالضرورة علاقة بين صحة الجملة النحوية وصدقها. يمكن أن يكون هناك جمل صحيحة نحويًا ومع ذلك فهي بلا معنى، وجمل غير صحيحة نحويًا ومع ذلك فهي ذات معنى. من أجل التمييز بين أكثر الجوانب المعنوية للكلمات، يطبق NLU مجموعة متنوعة من التقنيات التي تهدف إلى اكتشاف معنى مجموعة من الكلمات مع الاعتماد الأقل على الهياكل النحوية والقواعد.

يعد NLU مجالاً متطورًا ومتغيرًا، ويعتبر أحد المشاكل الصعبة في مجال الذكاء الاصطناعي. يتم تطوير العديد من التقنيات والأدوات لتمكين الآلات من فهم اللغة البشرية. توجد بعض المكونات الأساسية المشتركة في معظم أنظمة NLU. يتطلب الأمر قاموسًا للغة، بالإضافة إلى بعض أنواع المحلل النصي والقواعد النحوية لتوجيه إنشاء تمثيلات النص. يتطلب النظام أيضًا نظرية دلالية لتمكين فهم التمثيلات. هناك نظريات دلالية متعددة تستخدم لتحليل اللغة، مثل التحليل الدلالي العشوائي أو الدلالية البسيطة.

تشمل التقنيات الشائعة ل NLU:

• تعرف على الكيان المسمى
• تفسير معنى الكلمة

تعرف على الكيان المسمى هو عملية التعرف على “الكيانات المسمى”، والتي تشمل الأشخاص والأماكن والأشياء المهمة. يعمل تعرف على الكيان المسمى عن طريق التمييز بين المفاهيم الأساسية والمراجع في نص ما، وتحديد الكيانات المسمى ووضعها في فئات مثل المواقع والتواريخ والمنظمات والأشخاص والأعمال، إلخ. يتم استخدام نماذج خاضعة للرقابة بناءً على القواعد النحوية لتنفيذ مهام تعرف على الكيان المسمى.

تفسير معنى الكلمة هو عملية تحديد معنى أو معنى الكلمة بناءً على السياق الذي تظهر فيه الكلمة. غالبًا ما يستخدم تفسير معنى الكلمة علامات جزء الكلام من أجل توضيح الكلمة المستهدفة. تشمل الطرق الخاضعة للرقابة لتفسير معنى الكلمة استخدام آلات الدعم النوعي والتعلم القائم على الذاكرة. ومع ذلك، فإن معظم نماذج تفسير معنى الكلمة هي نماذج نصف خاضعة للرقابة التي تستخدم كل من البيانات المسمى وغير المسمى.

أمثلة على NLU (فهم اللغة الطبيعية)

تتضمن الأمثلة الشائعة على NLU الاستدلال الآلي وتوجيه التذاكر الآلي والترجمة الآلية والإجابة على الأسئلة.

الاستدلال الآلي

يهدف الاستدلال الآلي إلى منح الآلات نوعًا من المنطق أو الاستدلال. إنه فرع من العلوم المعرفية التي تهدف إلى إجراء استنتاجات بناءً على تشخيصات طبية أو حل نظريات رياضية بشكل برمجي/آلي. يستخدم NLU لمساعدة الآلات على جمع المعلومات وتحليلها وصنع استنتاجات بناءً على المعلومات.

توجيه التذاكر الآلي

غالبًا ما يستخدم NLU لتحسين المهام التلقائية للخدمة العملاء. عندما يتم إنشاء تذكرة خدمة عملاء، يمكن للrobots وآلات أخرى تفسير طبيعة الحاجة الأساسية للعميل وتوجيهه إلى الإدارة الصحيحة. تتلقى الشركات آلاف الطلبات لدعم كل يوم، لذلك تكون خوارزميات NLU مفيدة في تحديد الأولويات للتذاكر وتمكين وكلاء الدعم من التعامل معها بطرق أكثر كفاءة.

الترجمة الآلية

من الصعب ترجمة الكلام أو النص من لغة إلى لغة أخرى بدقة. في الواقع، الترجمة الآلية هي واحدة من أكثر المشاكل صعوبة في معالجة اللغة الطبيعية و NLU. تعتمد العديد من أنظمة الترجمة الآلية على القواعد اللغوية لترجمة بين اللغات، ولكن الباحثين يسعون لطرق أكثر تطورًا لترجمة بين اللغات. تحاول الترجمة الآلية باستخدام NLU تمكين ترجمة أكثر دقة عن طريق الحفاظ على السياق والمعلومات الدلالية المرتبطة بالنص المستهدف. أكثر أنظمة الترجمة الآلية دقة هي التي تجمع بين القواعد اللغوية والخوارزميات التي تستخرج المعنى الدلالي.

الإجابة على الأسئلة

يستخدم الاستخدام الآلي للغة NLU لتمكين الكمبيوتر من فهم الأسئلة المطرحة باللغة الطبيعية. يستخدم NLU لتقديم مستخدمي الجهاز إجابة بلغة طبيعية، بدلاً من تقديم قائمة بالإجابات المحتملة. عندما تسأل مساعدًا رقميًا سؤالاً، يستخدم NLU لمساعدة الآلات على فهم الأسئلة، واختيار الإجابات الأكثر مناسبة بناءً على ميزات مثل الكيانات المعترف بها وسياق العبارات السابقة.