وسم أجزاء الكلام
وسم أجزاء الكلام(تصنيف الكلمات) هي عملية تصنيف الكلمات ووضع علامات عليها في الجملة. إنها عملية تعيين علامة جزء الكلام لكل كلمة من خلال تصنيف أجزاء الكلام على أساس المكونات التي تحملها في البنية النحوية أو مورفولوجيا اللغة.
وهذا يعني أن عملية تحديد ما إذا كانت كل كلمة في الجملة هي اسم أو فعل أو صفة أو جزء آخر من الكلام تسمى أيضًا بوضع علامات على أجزاء الكلام أو ببساطة وضع العلامات.
يعد وضع علامات على أجزاء الكلام مهمة أساسية في معالجة اللغة الطبيعية ويتم استخدامها في التعرف على الكلام واسترجاع المعلومات والعديد من مجالات معالجة اللغة الطبيعية الأخرى.
تصنيف الكلمات
يمكن تقسيم الكلمات إلى فئتين رئيسيتين:
- كلمات المحتوى: الأسماء، الأفعال، الصفات، كلمات الحالة، الكلمات المميزة، الأرقام، الكميات، الضمائر
- الكلمات الوظيفية: الظروف، حروف الجر، حروف العطف، الكلمات المساعدة، الكلمات الصوتية، والحروف التعجبية.
يشير تصنيف أجزاء الكلام إلى عملية وضع علامة على جزء الكلام الصحيح لكل كلمة في نتيجة تقسيم الكلمات، أي عملية تحديد جزء الكلام لكل كلمة.
طرق تنفيذ وسم أجزاء الكلام:
يمكن تقسيمها بشكل أساسي إلى طرق تعتمد على القواعد وطرق تعتمد على الإحصائيات.
(1) وضع علامات على أجزاء الكلام بناءً على الحد الأقصى للإنتروبيا
(2) إخراج جزء من الكلام بناءً على الاحتمالية القصوى الإحصائية
(3) وضع علامات على أجزاء الكلام استنادًا إلى HMM
تطبيق وسم أجزاء الكلام:
(1) المعالجة المسبقة للتحليل النحوي
(2) المعالجة المسبقة لاكتساب المفردات
(3) معالجة مسبقة لاستخراج المعلومات
وضع علامات على أجزاء الكلام وغيرها
(1) إن وضع علامات على أجزاء الكلام هو في الأساس مشكلة وضع علامات على التسلسل، أو على وجه التحديد، مشكلة تصنيف.
(2) إن وضع علامات على أجزاء الكلام وتقسيم الكلمات الصينية مرتبطان ارتباطًا وثيقًا ويمكن دمجهما بطريقتين.
- خط الأنابيب: قم بالتقسيم أولاً، ثم قم بالوسم
- النموذج المشترك: يتم تنفيذ تقسيم الكلمات ووضع العلامات في وقت واحد