The Pulse
TII presenta Falcon-Emirati-7B per l’arabo emiratino
Il Technology Innovation Institute ha pubblicato Falcon-Emirati-7B, un modello linguistico adattato da Falcon-H1-Arabic per comprendere e generare arabo emiratino. Secondo TII, ha ottenuto l’84,83% nel suo benchmark Alyah ed è disponibile t
AI.info Team · Scritto con l’IA ·
«È questa la lacuna che Falcon-Emirati-7B è stato progettato per colmare.»
Shaikha Alsuwaidi, Omar Alkaabi e gli altri autori, Technology Innovation Institute
Un modello Falcon addestrato per il parlato emiratino
Il Technology Innovation Institute (TII) ha pubblicato Falcon-Emirati-7B il 6 ottobre, presentandolo come un modello linguistico specializzato nel dialetto emiratino. Il modello da 7 miliardi di parametri si basa su Falcon-H1-Arabic ed è progettato per comprendere e generare arabo emiratino, compresi il lessico, la grammatica e i riferimenti culturali del dialetto. TII lo rende disponibile tramite la sua piattaforma Falcon Chat.
Il rilascio affronta il divario tra l’arabo standard moderno scritto (MSA) e le conversazioni quotidiane negli Emirati Arabi Uniti. Secondo TII, l’emiratino è poco rappresentato nei testi online rispetto all’MSA, mentre proverbi, poesie e modi di dire possono dipendere da un contesto che sfugge alla traduzione letterale. Un modello, sostiene l’istituto, può capire le parole di una frase in emiratino senza coglierne il significato inteso né rispondere nel dialetto.
Tre fonti alla base dell’adattamento
TII afferma di essere partito dalle più ampie capacità di Falcon-H1-Arabic in arabo, anziché addestrare un nuovo modello da zero. La famiglia di modelli da cui deriva usa un’architettura ibrida che esegue in parallelo la modellazione dello spazio degli stati Mamba e il meccanismo di attenzione Transformer, e comprende modelli da 3 miliardi, 7 miliardi e 34 miliardi di parametri. L’adattamento per l’emiratino usa la versione da 7 miliardi di parametri, scelta da TII per bilanciare la qualità del modello con i costi di addestramento ed erogazione.
Per l’adattamento, il team ha combinato testi selezionati da siti web e forum emiratini con materiale in MSA sulla cultura, il patrimonio e le norme sociali degli Emirati. Ha inoltre generato dati sintetici nel dialetto, basandosi su glossari e regole relativi al lessico e alla grammatica dell’emiratino. TII afferma di aver provato diverse combinazioni di dati e fasi di addestramento, affiancando le valutazioni di parlanti madrelingua ai punteggi automatici per giudicare se le risposte suonassero naturali e fossero culturalmente appropriate.
Alyah valuta le conoscenze e la fedeltà al dialetto
Secondo TII, Falcon-Emirati-7B ha ottenuto l’84,83% su Alyah, un benchmark a scelta multipla composto da 1.173 domande raccolte presso parlanti emiratini madrelingua. Le domande riguardano temi tra cui i saluti, le regole di comportamento, il linguaggio figurato, il patrimonio culturale e la poesia. TII afferma che il modello ha ottenuto un punteggio superiore a quello dei modelli arabi e multilingue ottimizzati per seguire istruzioni inclusi nel confronto; il post esclude Falcon-H1-Arabic da quel confronto perché è la famiglia di base del modello.
Il team ha anche verificato se i modelli rispondessero alle domande aperte di Alyah in arabo emiratino, anziché ricorrere per impostazione predefinita all’MSA. In una valutazione affidata a Gemini 3.7 Flash, TII attribuisce a Falcon-Emirati-7B un punteggio di fedeltà al dialetto di 0,52 con credito parziale, rispetto a 0,05 per ALLaM-7B-Instruct-preview, 0,03 per gemma-3-27b-it e 0,02 per Jais-2-8B-Chat. Fanar-2-27B-Instruct ha ottenuto di fatto 0,00 su questa misura. TII descrive Falcon-Emirati-7B come l’unico dei cinque modelli a rispondere in modo affidabile in arabo emiratino.
Una valutazione culturale separata ha esaminato 283 scenari relativi agli Emirati Arabi Uniti, sia in arabo emiratino sia in MSA. TII riporta un punteggio complessivo dell’85,57% per Falcon-Emirati-7B, davanti ad ALLaM-7B con l’83,39%, Jais-2-8B con il 73,79% e Fanar-2-27B con il 71,50%. L’istituto avverte che il modello può commettere errori, soprattutto con espressioni rare e riferimenti molto locali, e che i giudizi sulle sfumature culturali possono differire anche tra parlanti madrelingua.
I limiti del benchmark
Il rilascio presenta risultati di benchmark prodotti da TII, non una valutazione indipendente delle prestazioni del modello nell’uso quotidiano. L’accuratezza nelle domande a scelta multipla misura se il modello sa selezionare una risposta tra quelle proposte; non dimostra che produrrà sempre un parlato emiratino naturale in una conversazione aperta. Il test separato sulla generazione delle risposte e le valutazioni dei parlanti madrelingua affrontano in parte la questione, ma TII stesso consiglia agli utenti di valutare il modello rispetto alle proprie esigenze specifiche prima di farvi affidamento in contesti sensibili o ad alto rischio.
Falcon-Emirati-7B si può provare sulla piattaforma Falcon Chat di TII. Il rilascio si concentra su un solo dialetto e affianca al modello Alyah, un benchmark concepito per misurare la comprensione linguistica e culturale specifica del dialetto.