Yandex работает над единой нейросетью для речи и текста
Yandex нанимает служащих для работы над еще не анонсированной нейросетевой моделью SpeechGPT.
Компания отыскивает в подобающую команду инженера в области машинного обучения. Согласно описанию вакансии, модель SpeechGPT обязана будет принимать текст и звук. Идет речь о мультимодальной модели – модели, способной обрабатывать различные виды вводных данных, которая «умеет принимать текст и звук, отвечать текстом и звуком, решать различные задачки на стыке текста и звука».
В Yandex’е пояснили, что работают над мультимодальностью в помощнике «Алиса» и остальных сервисах. На вопросец о модели SpeechGPT в компании не ответили.
Нейросетевые сервисы компании уже обрабатывают как речь, так и текст, но процесс происходит с преобразованием данных из 1-го вида в иной. Мультимодальные сети призваны улавливать детали, которые теряются при таковой конвертации, к примеру, эмоции (Эмоции отличают от других видов эмоциональных процессов: аффектов, чувств и настроений) и сарказм.
Напомним, в конце мая Yandex запустил YandexGPT 3 Lite. Это облегченная версия генеративной нейросети третьего поколения, которая сейчас доступна клиентам пасмурной платформы Yandex Cloud через API.