EUVIMEDEUVIMED entdecken
Open Access · CC BY-NC-ND 4.0

Multimodal Emotion Recognition for Misurata Dialect Speech Using Audio and Textual Features

Amna Ben Hussien, Ahmed Abushaala, Nada Algallay

The International Journal of Engineering & Information Technology (IJEIT) · 26.08.2026 · 15 (1) · 245-251

DOI: 10.36602/ijeit.v15i1.752 ↗

Kurz gefasst

Fachartikel in der Zeitschrift The International Journal of Engineering & Information Technology (IJEIT), online erschienen am 26.08.2026. Verfasst von Amna Ben Hussien und 2 weiteren Autor:innen. Der Volltext ist frei zugänglich (Open Access, CC BY-NC-ND 4.0).

AbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

يُعدّ التعرّف على المشاعر في اللهجات العربية من التحديات البحثية المهمة، خاصةً في البيئات محدودة الموارد التي تعاني من نقص البيانات المعلّمة والمصادر اللغوية المتخصصة. وفي هذا البحث تم التركيز على اللهجة المصراتية، إحدى لهجات العربية الليبية، من خلال اقتراح إطار عمل متعدد الوسائط للتعرّف على المشاعر بالاعتماد على المعلومات المستخلصة من الإشارة الصوتية والنص الناتج عنها. تم إنشاء مجموعة بيانات خاصة بالدراسة تضم 2400 تسجيلاً صوتياً مصنفاً لثلاث حالات شعورية هي الفرح والحزن والحياد، وقد جُمعت البيانات من عدد من المتحدثين الأصليين للهجة المصراتية واعتمد في تقييمها أسلوب مستقل عن المتحدثين لضمان موضوعية النتائج. ومن الجانب الصوتي، استُخرجت مجموعة من الخصائص الصوتية، من بينها معاملات MFCC والخصائص الطيفية، واستخدمت في تدريب نموذج للتعرّف على المشاعر من الإشارة الصوتية. وفي المقابل، حُوِّلت التسجيلات الصوتية إلى نصوص باستخدام نظام جاهز للتعرّف الآلي على الكلام، ثم استُخدمت هذه النصوص في بناء نموذج للتعرّف على المشاعر اعتماداً على المحتوى اللغوي. وللحصول على القرار النهائي، تم دمج مخرجات النموذجين الصوتي والنصي باستخدام أسلوب الدمج على مستوى القرار. وأظهرت النتائج أن النموذج متعدد الوسائط حقق دقة بلغت %73.28، متفوقاً على النماذج المعتمدة على الصوت أو النص بشكل منفصل. وتشير هذه النتائج إلى أن الجمع بين المعلومات الصوتية واللغوية يسهم في تحسين أداء أنظمة التعرّف على المشاعر في اللهجات العربية، ولا سيما في البيئات التي تعاني من محدودية البيانات والموارد المتاحة.

Zitieren

APA

Hussien, A. B., Abushaala, A., & Algallay, N. (2026). Multimodal Emotion Recognition for Misurata Dialect Speech Using Audio and Textual Features. The International Journal of Engineering & Information Technology (IJEIT), 15(1), 245-251. https://doi.org/10.36602/ijeit.v15i1.752

Vancouver

Hussien AB, Abushaala A, Algallay N. Multimodal Emotion Recognition for Misurata Dialect Speech Using Audio and Textual Features. The International Journal of Engineering & Information Technology (IJEIT). 2026;15(1):245-251. doi:10.36602/ijeit.v15i1.752

BibTeX
@article{Hussien2026,
  author = {Hussien, Amna Ben and Abushaala, Ahmed and Algallay, Nada},
  title = {Multimodal Emotion Recognition for Misurata Dialect Speech Using Audio and Textual Features},
  journal = {The International Journal of Engineering & Information Technology (IJEIT)},
  year = {2026},
  volume = {15},
  number = {1},
  pages = {245--251},
  doi = {10.36602/ijeit.v15i1.752}
}
Kostenlos starten →