Misura la capacità di comprendere le domande formulate oralmente e fornire risposte appropriate. Esempio di prompt: “Ascolta la domanda e dammi la risposta.”
Misura la capacità di sintetizzare contenuti orali di lunga durata. Esempio di prompt: “Sintetizza i punti principali di questa registrazione.”
Italianlanguage
Category
Benchmark
Velvet-14B
General
MMLU (5-shot)
58.6
Commonsense
Hellaswag (0-shot)
72.7
WinoGrande ITA-bench (0-shot)
73.2
PIQA ITA-bench (0-shot)
71.7
SciQ ITA-bench (0-shot) with p.
91.9
Reasoning
ARC-Challenge (0-shot)
55.2
EUlanguages
Category
Benchmark
Velvet-14B
General
MMLU (5-shot)
56.4
Instruction Following
IFEval (0-shot) - en
65.4
Commonsense
Hellaswag (10-shot)
72.8
WinoGrande (0-shot) - en
72.5
Reasoning
ARC-Challenge (25-shot)
57.3
MUSR (0-shot) - en
12.3
Function Calling
BFCL (AST summary) - en
67.5
DiscoverVelvetAIModels
Velvet Speech-2B
Un modello linguistico compatto e versatile, progettato per interazioni dinamiche in tempo reale, con la capacità di elaborare e comprendere il linguaggio parlato.
Un modello linguistico compatto, bilingue e ad alta efficienza, progettato per applicazioni in tempo reale, in grado di offrire potenti capacità di IA anche in contesti con risorse limitate o in ambienti edge.
Un modello ottimizzato per l’elaborazione del testo nelle 24 lingue ufficiali dell’Unione Europea, dotato di avanzate capacità di ragionamento e di prestazioni solide in ambienti complessi.
Trasforma i contenuti parlati in informazioni che possono essere analizzate, sintetizzate e interrogate, cogliendo segnali aggiuntivi come le emozioni.
2
Contenuti vocali multilingue
Supporta le interazioni vocali in ambienti multilingue, comprese le conversazioni in cui i parlanti passano da una lingua all’altra.
3
Task linguistici a partire dal parlato
Utilizza la voce come punto di partenza per il question answering, la sintesi e l’attivazione di funzioni, senza fermarsi alla trascrizione.