Nile-Chat: Egyptian Language Models for Arabic and Latin Scripts
Abstract
Nile-Chat models, using a Branch-Train-MiX strategy, outperform existing multilingual and Arabic LLMs on Egyptian dialect benchmarks, particularly in dual-script understanding and generation.
We introduce Nile-Chat-4B, 3x4B-A6B, and 12B, a collection of LLMs for Egyptian dialect, uniquely designed to understand and generate texts written in both Arabic and Latin scripts. Specifically, with Nile-Chat-3x4B-A6B, we introduce a novel language adaptation approach by leveraging the Branch-Train-MiX strategy to merge script-specialized experts, into a single MoE model. Our Nile-Chat models significantly outperform leading multilingual and Arabic LLMs, such as LLaMa, Jais, and ALLaM, on our newly introduced Egyptian evaluation benchmarks, which span both understanding and generative tasks. Notably, our 12B model yields a 14.4% performance gain over Qwen2.5-14B-Instruct on Latin-script benchmarks. All our resources are publicly available. We believe this work presents a comprehensive methodology for adapting LLMs to dual-script languages, addressing an often overlooked aspect in modern LLM development.
Community
Nile-Chat is a collection of LLMs for Egyptian dialect, uniquely designed to understand and generate texts written in both Arabic and Latin scripts.
In this work, we also introduce a novel language adaptation approach by leveraging the Branch-Train-MiX strategy to merge language-specialized experts, into a single MoE model.
هبعتلك نص عايزك تترجمه للعامية المصرية، استخدم لغة عامية مصرية سلسة وواضحة خالية تماما من الأخطاء والكلمات الفصحي الصعبه الفهم ع البسطاء ف مصر.
خليك ملتزم بأسلوب قريب من نغمة وطريقة السرد المستخدمة في الملخص الاصلي. النص عباره عن شرح لاحداث فيلم.. بطريقة ملخصات الافلام المصريه ع اليوتيوب بيتحكي زي قصه، اللي بتجمع بين الحكي التشويقي والتفاعل مع الجمهور.
حافظ علي روح الجمل الي قريب م الراوي اللي بيكلم المستمع مباشرة، واستخدم تعبيرت طبيعيه.
خليك محافظ على ترتيب الأحداث الزمني ومتختصرش او تحذف اي تفاصيل او احداث.
راعي التوازن بين العامية البسيطة وسلامة اللغة، علشان النص يكون جاهز للتعليق الصوتي في فيديو يوتيوب.
لو في مشاهد أكشن أو رعب أو لحظات عاطفية، عبر عنها بلغة قريبة من الجمهور.
كأن الراوي بيحكي لصاحبه أو لجمهور مش بيقرأ نص رسمي، عايز الجمل قريبة من طريقة الكلام اليوميه ف مصر، ، مع استخدام ألفاظ دارجة وده بيخلي المستمع حاسس بالدفء والحميمية.
الأحداث ماشية خطيا من البداية للنهاية، لكن بأسلوب يخلي الكلام خفيف على الودان.
واستخدام الاسماء بدل الضمائر، جمل شبه صوتية تصلح للقراءة بصوت سريع أو مع موسيقى خلفية.. الاسلوب المتبع يصلح كملخص يوتيوب مش سرد جاف.
الملخص طويل هبعتهولك علي اجزاء وكل جزء جديد هنلحم ف الاحداث علطول بدون مقدمات جديده لانهم قصه واحده.. راجع النص لغويًا قبل الإخراج، واتأكد إن الإيقاع طبيعي وسهل النطق والجمل متركبه مع بعض وبكلمات عاميه بسيطه..
Models citing this paper 4
Datasets citing this paper 0
No dataset linking this paper