Компания Cohere, занимающаяся корпоративным ИИ, выпустила новое семейство многоязычных моделей на полях саммита India AI Summit. Эти модели, названные Tiny Aya, имеют открытый вес — их код открыт для всех, кто хочет использовать или изменить. Они охватывают более 70 языков и запускаются на простых устройствах вроде ноутбуков без подключения к сети.
Подразделение Cohere Labs обеспечило поддержку языков Южной Азии — бенгальского, хинди, панджаби, урду, гуджарати, тамильского, телугу и маратхи.
Базовая модель включает 3,35 миллиарда параметров — это характеристика ее объема и сложности. Появилась также TinyAya-Global, доработанная для точного следования инструкциям пользователей и подходящая для приложений с разносторонней языковой базой. Региональные версии завершают линейку: TinyAya-Earth ориентирована на африканские языки, TinyAya-Fire — на южноазиатские, а TinyAya-Water — на Азиатско-Тихоокеанский регион, Западную Азию и Европу.
Такая стратегия помогает моделям лучше улавливать языковые особенности и культурный контекст, чтобы системы казались естественными и стабильными для местных пользователей. При этом все варианты Tiny Aya держат широкую многоязычную базу, удобную для доработки и экспериментов, отметила компания.
Модели прошли обучение на одном кластере из 64 ускорителей H100 производства Nvidia при умеренных вычислительных затратах. Они годятся для разработчиков и ученых, которые создают приложения под редкие языки. Запуск прямо на устройстве позволяет внедрять перевод без интернета. Cohere адаптировала свое ПО под локальный запуск — оно тратит меньше ресурсов, чем похожие решения.
В Индии и других странах с большим числом языков такая автономность расширяет возможности для разных задач без зависимости от сети.
Скачать модели можно на Hugging Face — сервисе для распространения и проверки ИИ, а также на платформе Cohere. Для локальной установки подойдут Hugging Face, Kaggle и Ollama. Cohere разместила данные для обучения и оценки на Hugging Face и готовит подробный отчет о процессе тренировки.
Гендиректор Cohere Эйдан Гомес ранее объявил о скором выходе компании на биржу. К концу 2025 года фирма зафиксировала 240 миллионов долларов в годовом регулярном доходе при ежеквартальном росте на 50%.