Словари и инструменты

Голос и слух для языка

У больших сервисов этого языка почти нет. Здесь собирают живой голос и делают первые модели: одна читает текст вслух, другая записывает речь буквами.

Голос и слух для языка: экраны 1
Голос и слух для языка: экраны 2

О проекте

У крупных голосовых сервисов крымскотатарского почти нет. Этот проект собирает живой голос и делает первые открытые модели: одна читает текст вслух, другая переводит речь в текст.

В основе — датасет из 1 566 записей голоса Севиль, примерно 2,6 часа речи. В исходном наборе рабочими были только 415 файлов, теперь исправлены все: шум, громкость, паузы и тексты. На этих записях дообучены SpeechT5 (синтез речи) и Whisper Large v3 (распознавание, ошибка в словах — 13,7 %).

Синтезированным голосом уже начитан целый роман — «Merdiven» Шамиля Алядина, 16 глав, почти два часа. Все модели и данные открыты (CC BY 4.0 и Apache 2.0): их можно встроить в свои приложения.

1 566
записей голоса
≈2,6
часа речи
13,7 %
ошибок в распознавании
16
глав романа начитано голосом

Что умеет

1

Голос Sevil

Датасет исправленных записей голоса.

2

Синтез речи

Первая модель, которая читает текст вслух.

3

Распознавание речи

Первая модель, которая записывает речь буквами.

Что внутри

Голос и слух для языка: Датасет голоса Sevil
01

Датасет голоса Sevil

1 566 исправленных записей с текстом: обучающая, проверочная и тестовая части. Лицензия CC BY 4.0.

Голос и слух для языка: Распознавание речи
02

Распознавание речи

Whisper Large v3, дообученный на крымскотатарском. Понимает кириллицу и латиницу, ошибка в словах — 13,7 %.

Автор
Ana Yurt

Кто делает: Сервин Османов (Ana Yurt).

Нашли ошибку? Напишите — поправим в следующем обновлении.

selam@ocaq.ru
Ещё в доме
Qırımtatar luğatı Словари и инструменты Ахмет акъай Словари и инструменты