Разработка разговорного онлайн-переводчика при недостаточных корпусных данных
Проблема. На данный момент ни один из имеющихся машинных переводчиков (Google Translate, Яндекс Переводчик и прочие) не поддерживает дагестанские языки, что сильно усложняет ознакомление всех туристов, лингвистов и просто интересующихся людей с непереведенными материалами. Если вдобавок учесть сложность изучения многих д. я. (например, табасаранский язык имеет 46 падежей, даргинский – 19) , становится очевидной необходимость в некоем инструменте, решающем эту проблему.
Решение проблемы:
- Использование имеющихся материалов и их переводов для обучения модели;
- Создание нейросетевой модели на основе родственных связей между дагестанскими языками.
Цель стартап-проекта – разработка модели и программного обеспечения нейронного машинного перевода дагестанских языков (на примере аварского языка) в виде веб-сервиса.
Научная новизна исследования – в решении проблемы сбора данных и разработке нейросетевой модели для дагестанских языков (на примере аварского языка).
2. Задачи реализации проекта:
a) подготовка большого количества (не менее 500000) параллельных текстов – пар предложений на двух языках для нераспространенных языков:
-Создание нейросетевых моделей на основе родственных связей между дагестанскими языками (пантюркская модель, аваро-андоцезская модель, лезгино-дарголакская модель): нейросетевую модель для перевода с одного языка можно использовать при обучении переводчика другому, родственному ему языку.
-Cоздание синтетических данных техникой обратного машинного перевода (back-translation, tagged back-translation);
-Создание сайта и/или канала для сбора необходимых данных энтузиастами.
Ожидаемые результаты.
a) параллельные корпусы текстов основных национальных и русского языков (не менее 50000 пар), в том числе, созданные программно (синтетические);
b) базовая версию веб-сервиса для перевода текста с аварского языка на русский и наоборот.
Прогноз по рынку
Результат проекта востребован как часть других популярных сервисов в сфере туризма, транспорта, питания и т.д.
