نمایش چکیده فارسی

Consensus-Based Multi-Source Cross-Lingual Label Projection for Persian Named Entity Recognition

Reyhaneh Boroomand1 Marziea Rahimi2

Abstract :
The absence of large-scale accurately annotated corpora still remains a bottleneck for NER in low-resource languages. Cross-lingual label projection is an inexpensive alternative to manual annotation, but traditional single-source transfer pipelines are very sensitive to translation errors, word alignment failures, and inconsistent entity boundaries. We propose a consensus-based multi-source cross-lingual label projection framework to build a high-quality Persian NER dataset in this paper. Traditional approaches transfer annotations from one high-resource language. Conversely, the proposed framework exploits multiple source languages: English, German, and French, to generate complementary label projections into Persian. Each source stream undergoes source-side NER annotation, neural machine translation, word-to-word alignment, span-level alignment, and preliminary BIO label projection. Then, a confidence-aware consensus module integrates the projected annotations by jointly considering the source reliability, the lexical and contextual alignment confidence, the span overlap, and the agreement on the entity type. The framework also further applies boundary reconciliation and BIO-consistency validation to resolve conflicting projections and remove low-confidence annotations. The dataset is evaluated by training representative sequence-labeling and multilingual Transformer models such as BiLSTM-CRF, mBERT, and XLM-RoBERTa. The experiments are designed to evaluate the contribution of each source language and each refinement component by comparative and ablation analyses. The approach presented suggests a scalable and language-independent approach to reduce annotation noise and improve the reliability of automatically constructed NER resources for Persian and other low-resource languages.

Keywords : named entity recognition cross lingual transfer multi source learning label projection persian nlp low resource languages data construction


زبان مقاله : انگلیسی
محور مقاله : مهندسی و علوم کامپیوتر ( کلیه گرایش ها)
محل انتشار : کنفرانس ملی فناوری اطلاعات، نانوتکنولوژی، هوش مصنوعی و آینده پژوهی فناوری
آدرس وب سایت کنفرانس : itnaf.ir
کد IOI مقاله : AAHD-ABKDHZ
لینک مستقیم مقاله : https://isnac.ir/AAHD-ABKDHZ
نمایش چکیده فارسی : https://isnac.ir/SA/AAHD-ABKDHZ

سایر مقالات محل انتشار
  1. A Study on Design Understandability and Interaction of the therapy-specific Robots
  2. طراحی و مهندسی یک حسگر زیستی نوری چند مدی پلاسمونیک مبتنی بر تشدیدگرهای حلقه شکاف برای سنجش جامع آنتی‌ژن
  3. طراحی یک اسیلاتورکنترل شونده با ولتاژ با نویز فاز بسیار پایین و بازه وسیع فرکانسی با تکنولوژی نانولوله کربنی برای کاربردهای PLL
  4. یک چارچوب هوشمند آگاه به زمینه برای ارتباطات V2V و V2Iدر شبکه‌های خودرویی شهرهای هوشمند با استفاده از داده‌های ترافیکی شبکه سلولی
  5. An Ensemble Non-Dominated Feature Selection Method: A Case Study on Prostate Cancer
  6. تشخیص زودهنگام پوسیدگی دندان با استفاده از شبکه‌های عصبی
  7. Simulation and Performance Comparison of Torque Tube and LVDT Sensors in Displacer-Based Level Measurement Systems
  8. ارتقا سامانه ناوبری پهپاد مهاجر ۶ با استفاده از فناوری
  9. کاربرد نانوذرات مگنتیت (Fe3O4) در پزشکی (از سنتز تا عملکرد)
  10. Simulation and Modeling of Floating-Gate Non-Volatile Memory Performance: Focus on Oxide Thickness, Programming Speed, and Charge Transport Mechanisms
  11. Fraud Analytics with Big Data: A Literature Review on Machine Learning Algorithms in Bankruptcy Prediction and Financial Fraud Detection
  12. تحلیل آینده‌پژوهانه هم‌گرایی هوش مصنوعی، فناوری نانو و فناوری اطلاعات در مسیر تحول صنعتی آینده
  13. نقش تحول دیجیتال در خدمات کتابخانه‌های عمومی برای توان‌یابان جسمی و ذهنی
  14. Prediction and Optimization of Oxygen Production under Microgravity Conditions Using Machine Learning
  15. Simulation and Performance Comparison of Ultrasonic, Non-Contact Radar, and Guided Wave Radar Sensors in Level Measurement Systems