Sarvam AI open-source hai framework đánh giá ASR tiếng Ấn: tại sao WER đã hết thời với 22 ngôn ngữ Indic

Sarvam AI vừa công bố hai framework mã nguồn mở cùng bộ hướng dẫn 22 ngôn ngữ để đánh giá ASR tiếng Ấn. WER và CER vốn sinh ra cho tiếng Anh và liên tục phạt sai khi gặp code-mixing, biến thể script hay register khác nhau. Bộ bốn chỉ số mới LLM-WER, LLM-CER, Intent Score và Entity Preservation Score dùng LLM làm giám khảo, cho bức tranh sát thực tế hơn về chất lượng ASR.