🔤 Язык живёт, пока на нём говорят, пишут и используют его в повседневной жизни и в интернете. Рассказываем, как Яндекс вместе с ФАДН и Домом народов России развивает поддержку языков народов РФ в Переводчике и учит нейросети работать с языками, для которых данных особенно мало.
👉 Недавно в Переводчик добавили алтайский и карельский, а также синтез и распознавание для кабардино-черкесского. А как сказать «спасибо» на 21 языке народов РФ — показали в этом посте.
Подписывайтесь 🔍 @yandex
💸 Как получать мгновенный кешбэк и менять баллы Плюса на рубли? Рассказываем об этой и других полезных фичах Яндекс Пэя — в новом выпуске «ПРОДа».
👉 Этот и другие выпуски вы можете также посмотреть на YouTube, Кинопоиске и в VK Видео.
Подписывайтесь 〰️ @yandex
Если модель говорит по-русски, это ещё не значит, что вы с ней на одной волне
Каждую нейросеть нужно адаптировать под понимание и общение на конкретном языке. На примере новой открытой нейросети Яндекса Alice AI Foundation, которую обучили с нуля внутри компании, рассказываем, как ИИ прививают знание русского.
Токенизация на русском
LLM читают текст не по словам или буквам, а по токенам — кусочкам текста, из которых складываются промпты, размышления и ответы. Таким фрагментом может быть один символ, целое слово или его часть. Чтобы нейросеть могла нарезать текст на токены, разработчики заранее составляют для неё словарь. Собирают его автоматически: если слово часто встречается в датасете, оно получает собственный токен.
Но если обучающие материалы были, скажем, на английском, то русские слова при обработке будут дробиться на несколько токенов. И вообще один и тот же текст на разных языках превращается в разное количество токенов. Например, в Claude Opus 5 фраза «Это тестовый текст для подсчёта количества токенов на разных языках» на русском занимает 17 токенов, а на английском — всего 13.
Словарь Alice AI Foundation создавали на текстах, где преобладал русский, поэтому она эффективно его токенизирует. Поэтому обработка запросов упрощается — модели требуется меньше токенов, чтобы получить результат. Она начинает читать и генерировать текст быстрее, а на оплату её работы требуется меньше денег. Заодно в контекстное окно помещается больше текста, и нейросеть дольше сохраняет память о начале переписки.
Обучение на русском
Материалы для обучения влияют и на то, насколько хорошо модель понимает пользователя. Смысл запросов часто зависит от страны, поэтому просто перевести английские тексты недостаточно — модель нужно обучать на русских, чтобы она понимала местные реалии и культурный код.
При этом, чтобы модель запомнила факт, его нужно пересказать несколько раз в разных формах. Например, строчку «Пётр I основал Петербург в 1703 году» для обучения превращают в реплику экскурсовода, в запись в духе исторической заметки и в вопрос с ответом.
Тестирование на русском
Результат адаптации под русский язык нужно проверять на специальных тестах, основанных на популярных запросах пользователей. Для Alice AI Foundation в Яндексе разработали собственные тесты на знание истории, права, английского и общих фактов. В последней категории, к примеру, она набрала 86,5 балла против 83,2 китайской DeepSeek-V4-Flash-Base, которая в 3,5 раза больше.
Alice AI Foundation получилась компактной благодаря архитектуре MoE: из 80 млрд параметров для обработки токена задействуются лишь около 3 млрд. Так модель вмещает больше знаний, но требует меньше вычислений — и на многих задачах обходит более крупные открытые нейросети.
Релиз модели заметили и за рубежом, где её включили в число ключевых запусков недели. А подробнее о разработке и обучении Alice AI Foundation можно почитать в техрепорте.
Подписывайтесь 👉 @techno_yandex
🐶 Вот такая вот кнопка, собачка! Показываем лайфхак, как научить своего питомца присылать пуш-уведомления — с помощью беспроводной кнопки Яндекса.
⬇️ Читайте в этой справке, как подключить такую кнопку. А какие сценарии Умного дома можно настроить благодаря IP-камере с Алисой — смотрите в этом ролике.
Подписывайтесь 〰️ @yandex
❤️ Новые фишки в сервисах Яндекса за сентябрь — собрали их в этом посте. Читайте и пишите, что уже попробовали
🔴Поручайте рутинные рабочие задачи Алисе Al для бизнеса. Она найдёт письмо в Почте, создаст презентацию и напомнит о текущих задачах
🔴Играйте в квесты по мирам на Промптхабе и создавайте свои. Каждый ход вы читаете сюжет, выбираете действие героя и смотрите, к чему это приведёт
🔴Есть ли бензин и очереди на АЗС прямо сейчас? Узнавайте с помощью «Разговорчиков» в Яндекс Картах
🔴Используйте режим «Эксперт» в Алисе Al для сложных запросов по теме финансов, медицины, права или путешествий
🔴Открыли набор экспертов для обучения Алисы Al — профессионалов из разных областей, которые сделают ответы нейросети точнее
🔴Готовьтесь к ЕГЭ и разбирайте непонятные темы — в образовательном модуле Алисы Al «Для учёбы»
🔴Поручайте многоступенчатые задачи Нейроюристу. Например, он сравнит версии документа контрагента, учтёт договорённости с коллегами и предложит правки
🔴Объединили Телемост и Мессенджер. Теперь это единая платформа для звонков и чатов
🔴Создавайте ИИ-ботов — без навыков программирования в Yandex Al Studio
🔴Используйте новые решения Yandex B2B Tech для бизнеса, защиты инфраструктуры, работы с данными и проверки безопасности кода. Подробнее о каждом — в посте
🔴Запустили рободоставку в Центральном районе Петербурга — и показали его на карте с другими зонами
👉 И это ещё не всё. Больше фишек — в дайджесте на нашем корпоративном сайте
Подписывайтесь 〰️ @yandex
🔴 Телефон сел, а зарядка осталась дома? Рассказываем, как взять Бери заряд даже с разряженным телефоном, зачем нужна бесплатная минута при аренде пауэрбанка и где искать станции со встроенными банковскими терминалами
↘️ Больше ответов на ваши вопросы про «Бери заряд» — в выпуске Q&A.
Подписывайтесь 〰️ @yandex
🟥 «Учился в Бауманке и думал, что буду программистом». Но сложилось немного иначе: в итоге Петя Ермаков работает ML-директором в Яндексе. А как так вышло и чем он занимается в свободное время — он рассказал в видео.
↘️ Также Петя ведёт телеграм-канал о Data Science и Big Data — подписывайтесь.
🚀 В YDB, отказоустойчивой базе данных Яндекса, появился гибридный поиск. С ним компании улучшат выдачу поиска и рекомендательных систем и повысят качество ответов ИИ-помощников.
↘️ Что такое векторный поиск и зачем он нужен — об этом рассказывали в выпуске «Вопроса со звёздочкой». Подробнее про гибридный поиск в YDB читайте в статье на «Хабре».
Подписывайтесь 〰️ @yandex
➕ «Продуктовый дизайнер должен быть думающим профессионалом, а не просто исполнителем». В новом «1×1» говорим с Настей Вишневской, арт-директором Умных устройств с Алисой.
В этом выпуске Настя рассказывает, что делает её команда (например, саунд-дизайн для Станции Стрит!), вспоминает свой путь в Яндексе и рассуждает о влиянии нейронок на профессию.
👀 Это «1х1» — формат, в котором яндексоиды проводят с вами личную встречу на работе. Смотрите здесь, на YouTube и в VK Видео
