Нейросеть от Авито оказалась лидером среди легких ИИ-моделей на русском языке

Нейросеть A-Vibe от «Авито» стала лучшей среди облегченных ИИ-моделей (до 10 млрд параметров) в независимом российском бенчмарке MERA.

По оценке аналитиков, A-Vibe в разы лучше аналогичных моделей понимает запросы, генерирует код и поддерживает осмысленный диалог.

Известно, что до конца года «Авито» хочет добавить 20 новых сценариев, а в будущем может открыть код модели для всех. Старший директор по данным и аналитике компании Андрей Рыбинцев ранее отметил, что сервис планирует вложить в GenAI около 12 млрд руб, а заработать более 21 млрд руб. к 2028 году.

В MERA отметили, что A-Vibe обошла в сравнении такие модели, как GPT-4o mini, Gemma 3 27B, Claude 3.5 Haiku, Mistral Large и другие популярные небольшие нейросети. Тестирование включало задачи от базового понимания текста до продвинутых лингвистических задач, требующих глубокой работы с контекстом.

Вот результаты тестирования:

• генерация кода: на 25% лучше Gemini 1.5 с 8 млрд параметров;

• ведение диалога: на 32% точнее Llama 3.1 с 405 млрд параметров;

• способность анализировать смысл текста: на 23% точнее Claude 3.5 Haiku.

Для разработки A-Vibe и A-Vision команда «Авито» использовала для обучения на начальном этапе открытую модель. Она обучалась на данных более чем 100 языков, при этом русский составлял менее 1% общего объема данных. Разработчики модифицировали и «русифицировали» модель, заменив стандартный токенизатор на собственный, который умеет работать с русским языком.