Skip to content
DSML.KZ
Publications

Article · L.N. Gumilev atyndaġy Euraziâ u̇lttyķ universitetìnìņ habaršysy. · March 30, 2025

Идентификация языка устной речи с использованием модели Wav2Vec2 для казахского языка

Zhanibek Kozhirbayev, Sanzhar Umbet

Sanzhar Umbet
Open via DOIPDF

Abstract

В данном исследовании представлена ​​разработка и тонкая настройка модели идентификации языка устной речи с использованием варианта XLSR (Cross-Lingual Speech Recognition) Wav2Vec2. Обученная на богатом и разнообразном наборе данных, охватывающем шесть языков, с особым акцентом на языках с низкими ресурсами, таких как казахский, модель демонстрирует замечательные возможности в многоязычном распознавании речи. Благодаря обширной оценке тонко настроенная модель не только превосходит существующие эталонные показатели, но и превосходит другие современные модели, включая варианты Whisper. Достигнув впечатляющего результата F1 92,9% и точности 93%, модель демонстрирует свою производительность в реальных многоязычных и малоресурсных сценариях. Эта работа вносит значительный вклад в развитие технологий распознавания речи, предоставляя надежное решение для идентификации языка в различных языковых средах, особенно в недостаточно представленных языковых условиях. Его успех подчеркивает потенциал моделей на основе Wav2Vec2 в улучшении систем обработки речи в многоязычных контекстах с низкими ресурсами. Итоги данного анализа могут способствовать разработке надежных и эффективных систем автоматического распознавания речи, оптимизированных для казахского языка. Такие технологии найдут применение в различных областях, включая преобразование речи в текст, работу голосовых ассистентов и инструменты голосовой коммуникации.

Speech Recognition and SynthesisMusic and Audio ProcessingSpeech and Audio Processingspoken language identificationwav2vec 2.0XLS-R

More by Sanzhar Umbet