Arena AI — это платформа на базе сообщества для сравнения передовых ИИ-моделей и формирования публичных лидербордов на основе отзывов реальных пользователей. Нажмите на поле ввода ниже, чтобы начать создавать AI-видео по промптам в SJinn.
Arena AI, ранее LMArena, часто ищут как публичную платформу для сравнения ИИ-моделей и лидербордов. На официальных страницах она описывается как система оценки, управляемая сообществом, созданная исследователями из UC Berkeley, где разработчики, исследователи и креативные специалисты используют передовые модели, голосуют за анонимные или выбранные результаты и помогают формировать лидерборды, основанные на реальном использовании. Arena охватывает такие сценарии, как чат, веб-поиск, создание приложений и сайтов, генерация изображений, генерация видео, выбор моделей и side-by-side сравнение.
Изучите основные сценарии Arena AI для сравнения моделей и оценки креативных результатов
Feature 01
Режим Arena Battle позволяет пользователям отправить промпт и сравнить два анонимных ответа моделей в формате head-to-head. Пользователи изучают оба результата, голосуют за ответ, который лучше всего соответствует их задачам, а затем видят названия моделей после голосования. Такая анонимность помогает снизить предвзятость и сделать обратную связь более полезной для публичных рейтингов.
Feature 02
Лидерборды Arena формируются голосами сообщества, а не только статичными результатами бенчмарков. В официальном FAQ описаны рейтинги, основанные на парных сравнениях и методе оценки в стиле Bradley-Terry, который помогает преобразовать множество пользовательских предпочтений в публичные рейтинги моделей в категориях текста, веб-разработки, изображений, видео, компьютерного зрения, документов и поиска.
Feature 03
Arena расширяет ту же идею сравнения на креативную генерацию. Image Arena позволяет пользователям сравнивать две анонимные генерации изображений по одному и тому же промпту, а Video Arena позволяет авторизованным пользователям сравнивать результаты text-to-video или image-to-video и голосовать за предпочитаемую генерацию для соответствующих видео-лидербордов.
Feature 04
Arena также поддерживает сценарии, в которых пользователи выбирают конкретные модели вместо анонимного режима Battle. Селектор моделей описан для режимов Direct и Side-by-Side: модели сортируются по рейтингу и фильтруются по модальности, чтобы пользователи могли более осознанно сравнивать платные, open-source, проприетарные и другие варианты моделей.
Все, что нужно знать об Arena AI
Начните создавать
Перейдите от исследования сравнения моделей к генерации: начните с промпта, при необходимости добавьте референсные медиа и создайте AI-видео в workflow Studio.
Начать бесплатно