التجزئة — التحليل النحوي السطحي
- قدّمه
- Steven Abney
- السنة
- 1991
- النوع
- NLP partial-parsing task
هذا النص ترجمة آلية ولم تتم مراجعته بعد. اقرأ النص الأصلي بالإنجليزية
ماذا تفعل؟
التجزئة (Chunking)، وتُسمى أيضًا التحليل النحوي السطحي (shallow parsing)، هي مهمة من مهام معالجة اللغات الطبيعية قدمها ستيفن أبني (Steven Abney) عام 1991، وتقوم بتقسيم النص إلى أجزاء نحوية — مثل العبارات الاسمية والعبارات الفعلية — باستخدام وسوم أجزاء الكلام. تستخلص هذه المهمة بنية نحوية مفيدة بسرعة دون بناء شجرة تحليل نحوي كاملة للجملة.
الفكرة الحدسية وراء الطريقة
يصف التحليل النحوي الكامل كيفية ارتباط كل كلمة بكل كلمة أخرى، وهو أمر مكلف وغالبًا ما يكون أكثر مما يتطلبه التطبيق. تتخذ التجزئة طريقًا مختصرًا: بدءًا من الكلمات الموسومة بالفعل بأجزاء كلامها، تقوم بتجميع الوسوم المتجاورة في عبارات مسطحة وغير متداخلة. تتعلم أن 'the small dog' هي عبارة اسمية وأن 'is barking' هي عبارة فعلية دون حل الشجرة النحوية الكاملة، مما يوفر رؤية هيكلية سريعة بتكلفة منخفضة.
التاريخ
قدم ستيفن أبني (Steven Abney) التجزئة (Chunking) عام 1991 في ورقته البحثية 'Parsing by Chunks'، والتي صاغت التحليل النحوي الجزئي حول الأجزاء كبديل فعال للتحليل النحوي الكامل. تم توحيد المهمة وتعميمها لاحقًا من خلال مهمة CoNLL-2000 المشتركة حول التجزئة (Tjong Kim Sang & Buchholz, 2000)، والتي أنشأت مجموعة بيانات مشتركة وتقييمًا للمشكلة.
متى تُستخدم
استخدم التجزئة عندما يكون لديك نص موسوم بأجزاء الكلام وتحتاج إلى بنية على مستوى العبارة بسرعة دون تكلفة التحليل النحوي الكامل. إنها مناسبة للتحليل الاستكشافي والوصفي للنص وتحتاج فقط إلى كمية متواضعة من البيانات (حوالي عشر وحدات). يجب أن يتوفر شرطان: يجب أن يكون وسم أجزاء الكلام قد اكتمل بالفعل، ويجب أن توجد قواعد تجزئة أو نموذج للغة المستهدفة.
الحدود والاعتبارات
- تتطلب إكمال وسم أجزاء الكلام أولاً؛ تنتشر الأخطاء في الوسوم إلى الأجزاء.
- تحتاج إلى قواعد تجزئة أو نموذج يتناسب مع اللغة المستهدفة.
- تنتج فقط عبارات مسطحة وغير متداخلة — لا تستعيد البنية النحوية المتداخلة الكاملة.
لا تغني شروط المصدر عن المراجعة العلمية المستقلة أو التحقق بواسطة محرك تحليل.
نقاط القوة
- تستخلص بنية نحوية مفيدة بسرعة، دون تكلفة بناء شجرة تحليل نحوي كاملة.
- تعمل من وسوم أجزاء الكلام بقواعد نمطية بسيطة وشفافة يسهل فحصها وتعديلها.
- توفر لبنات بناء على مستوى العبارة (العبارات الاسمية والفعلية) للمهام اللاحقة مثل استخلاص المعلومات.
التطبيقات
- استخلاص المعلومات — عزل العبارات الاسمية والفعلية ككيانات وعلاقات مرشحة.
- المعالجة المسبقة للتعرف على الكيانات المسماة عن طريق إظهار حدود العبارات الاسمية.
- تحليل هيكلي سريع لمجموعات كبيرة من النصوص حيث يكون التحليل النحوي الكامل مكلفًا للغاية.
- دراسة استكشافية ووصفية لأنماط العبارات النحوية في مجموعة نصوص.
كيف يعمل
كيف يعمل
تبدأ الطريقة من نص تم وسم أجزاء كلامه بالفعل — يحمل كل رمز تسمية مثل محدد، صفة، اسم، أو فعل. يعد وسم أجزاء الكلام المكتمل شرطًا أساسيًا، لأن المجزئ يعمل على هذه الوسوم بدلاً من الكلمات الخام.
يتم تحديد قواعد التجزئة (chunk grammar) للغة المستهدفة، عادةً كأنماط على وسوم أجزاء الكلام (على سبيل المثال، عبارة اسمية كمحدد اختياري، أي صفات، ثم اسم). يجب أن تكون مجموعة قواعد أو نموذج مدرب للغة متاحًا لكي ينجح هذا.
تُطبق القواعد النحوية عبر التسلسل الموسوم، حيث تُجمع الوسوم المتجاورة التي تتطابق مع نمط معين في أجزاء مسطحة وغير متداخلة. على عكس التحليل النحوي الكامل، لا تُعشش الأجزاء في شجرة كاملة — يبقى التحليل سطحيًا.
تُقرأ الأجزاء العبارية المحددة — العبارات الاسمية، والعبارات الفعلية، وما شابهها — كمخرجات. تغذي هذه الهياكل السطحية المهام اللاحقة مثل استخلاص المعلومات أو التعرف على الكيانات المسماة.
الأخطاء الشائعة
- تشغيل التجزئة على نص غير موسوم أو موسوم بشكل سيء — يجب إجراء وسم أجزاء الكلام أولاً، وتنتقل أخطاء الوسم مباشرة إلى الأجزاء.
- إعادة استخدام قواعد تجزئة مبنية للغة واحدة على لغة أخرى؛ يجب أن تتطابق القواعد النمطية مع اللغة المستهدفة.
- توقع بنية نحوية متداخلة أو كاملة من محلل نحوي سطحي — الأجزاء مسطحة حسب التصميم، لذا استخدم التحليل النحوي الكامل عندما تكون البنية العميقة مطلوبة.
الأسئلة الشائعة
كيف تختلف التجزئة عن التحليل النحوي الكامل؟
يبني التحليل النحوي الكامل شجرة نحوية كاملة توضح كيفية ارتباط كل كلمة بكل كلمة أخرى. التجزئة هي تحليل نحوي سطحي: تقوم بتجميع الكلمات المتجاورة في عبارات مسطحة وغير متداخلة مثل العبارات الاسمية والفعلية، دون تعشيشها في شجرة كاملة. هذا يجعلها أسرع بكثير وغالبًا ما تكون كافية للمهام التي تحتاج فقط إلى بنية على مستوى العبارة.
هل أحتاج إلى وسم أجزاء الكلام قبل التجزئة؟
نعم. تعمل التجزئة على وسوم أجزاء الكلام بدلاً من الكلمات الخام، لذا يجب إكمال الوسم أولاً. نظرًا لأن المجزئ يعتمد على تلك الوسوم، فإن أي أخطاء في الوسم تنتقل مباشرة إلى الأجزاء.
هل تعمل التجزئة لأي لغة؟
إنها تعمل فقط حيث توجد قواعد تجزئة أو نموذج مدرب للغة المستهدفة. القواعد النمطية خاصة باللغة، لذا لا ينبغي تطبيق قواعد نحوية مكتوبة للغة واحدة على لغة أخرى.
ماذا تنتج التجزئة؟
إنها تنتج أجزاء عبارية مسطحة وغير متداخلة — عادةً عبارات اسمية وعبارات فعلية — تُقرأ من التسلسل الموسوم. تُستخدم هذه الهياكل السطحية بشكل شائع كمدخل لاستخلاص المعلومات والتعرف على الكيانات المسماة.
طرق ذات صلة
المصادر
Abney, S. (1991). Parsing by Chunks. In Principle-Based Parsing. Kluwer Academic Publishers.
ردمك: 978-0-7923-1173-4تم النسخ.Tjong Kim Sang, E.F. & Buchholz, S. (2000). Introduction to the CoNLL-2000 Shared Task: Chunking. Proceedings of CoNLL-2000.
افتح مرجع المنشورتم النسخ.