LMArena, стартап, специализирующийся на краудсорсинговой оценке производительности моделей ИИ, достиг оценки в 1,7 миллиарда долларов всего через четыре месяца после запуска своего коммерческого продукта. Компания объявила о привлечении 150 миллионов долларов в рамках раунда финансирования Серии A, возглавляемого Felicis и UC Investments, инвестиционным подразделением Калифорнийского университета.

Эта последняя инвестиция последовала за посевным раундом в 100 миллионов долларов в мае, который оценил компанию в 600 миллионов долларов. В общей сложности LMArena привлекла 250 миллионов долларов примерно за семь месяцев, что свидетельствует о высокой уверенности инвесторов в ее подходе к бенчмаркингу моделей ИИ.

Основным продуктом LMArena является веб-сайт для потребителей, который позволяет пользователям напрямую сравнивать производительность различных моделей ИИ. Пользователи вводят запросы, и платформа отправляет эти запросы двум моделям, после чего пользователь выбирает лучший результат. Эти пользовательские сравнения, составляющие 60 миллионов разговоров в месяц от более чем 5 миллионов ежемесячных пользователей из 150 стран, агрегируются для создания таблиц лидеров производительности. Эти таблицы лидеров ранжируют модели по различным задачам, включая генерацию текста, веб-разработку, зрение, создание текста в изображение и другие специализированные критерии. Платформа оценивает широкий спектр моделей, включая модели от OpenAI (варианты GPT), Google (Gemini), Anthropic (Claude) и Grok, а также специализированные модели, ориентированные на такие области, как генерация изображений и рассуждения.

Быстрый рост и высокая оценка LMArena подчеркивают растущую важность прозрачной и доступной оценки моделей ИИ в быстро развивающемся ландшафте ИИ. Поскольку как предприятия, так и потребители сталкиваются с распространением моделей ИИ, потребность в надежных бенчмарках становится критической. Краудсорсинговый подход LMArena предлагает уникальную перспективу, выходя за рамки традиционных, экспертных оценок и включая реальный пользовательский опыт. Эта методология имеет потенциал для влияния на разработку моделей, направляя создателей к улучшениям, которые соответствуют фактическим потребностям пользователей.

Изначально задуманный как открытый исследовательский проект под названием Chatbot Arena в Калифорнийском университете в Беркли в 2023 году, переход LMArena к коммерческому предприятию отражает растущий спрос на практические инструменты, которые могут помочь ориентироваться в сложностях рынка моделей ИИ. Благодаря этому новому финансированию LMArena имеет возможность расширить свою платформу, усовершенствовать свои методологии оценки и еще больше укрепить свою роль в качестве ключевого ресурса как для разработчиков, так и для пользователей, стремящихся понять и сравнить возможности различных моделей ИИ. Будущие планы компании, вероятно, включают расширение спектра оцениваемых моделей, включение более сложных метрик оценки и потенциально предложение решений корпоративного уровня для предприятий, стремящихся интегрировать ИИ в свою деятельность.