Artificial Analysis
Независимые рейтинги языковых, графических, видео- и речевых ИИ-моделей и провайдеров по качеству, скорости и стоимости.
- Можно попробовать бесплатно
- Нет
- Без регистрации
- Да
- Русский интерфейс
- Нет
- Разработчик
- Artificial Analysis
Artificial Analysis — платформа, которая сама тестирует ИИ-модели и хостинг-провайдеров и публикует сравнения по интеллекту, скорости вывода, задержке и цене за задачу. Главный показатель — Intelligence Index, сводная оценка качества языковых моделей. Есть отдельные рейтинги для генерации изображений, видео, распознавания и синтеза речи, а также индексы для кодинговых агентов. Сервис помогает выбрать модель и провайдера под конкретную задачу, не полагаясь на цифры самих разработчиков. Лидерборды и графики открыты без оплаты, платные планы добавляют доступ к API, экспорт данных, собственные графики и отраслевые отчёты.
Возможности
Intelligence Index
Сводная оценка качества языковых моделей по набору собственных тестов. Позволяет сравнивать модели разных компаний по одной шкале.
Скорость и задержка
Измеряются скорость вывода в токенах в секунду и время ответа у разных провайдеров одной и той же модели. Видно, где модель работает быстрее.
Стоимость на задачу
Рейтинги учитывают цену токенов и фактический расход на выполнение тестов. Можно сопоставить качество и затраты.
Рейтинги изображений и видео
Отдельные лидерборды для генерации и редактирования изображений, text-to-video, image-to-video и редактирования видео.
Рейтинги речевых моделей
Сравнение моделей распознавания речи, синтеза речи и speech-to-speech.
Индексы агентов и отраслей
Coding Agent Index и другие индексы оценивают кодинговых агентов и применимость моделей в отдельных отраслях, например в финансах, праве и медицине.
Model Recommender
Инструмент подбора модели под задачу и требования к качеству, скорости и цене.
API и экспорт данных
В платных планах доступны API, выгрузка данных бенчмарков и построение собственных графиков и таблиц.
Кому подойдёт
- Разработчики
Выбирают модель и провайдера API для продукта по соотношению качества, скорости и цены.
- Аналитики
Строят собственные графики, выгружают данные бенчмарков и готовят сравнения моделей.
- Исследователи и учёные
Отслеживают динамику качества моделей и методологию независимых оценок.
- Предприниматели и руководители
Оценивают, какая модель оптимальна по стоимости для внедрения в компании.
Как начать
- Открыть сайт и выбрать раздел: языковые модели, изображения, видео, речь или провайдеры.
- Отсортировать лидерборд по качеству, скорости или цене.
- Сравнить нужные модели на графиках и страницах моделей.
- При необходимости воспользоваться Model Recommender для подбора под задачу.
- Для API и экспорта данных оформить платный план.
Тарифы
Годовая оплата Pro даёт скидку, экономия $984. Pro рассчитан на одно место, для нескольких пользователей нужен Enterprise. Для академических организаций возможны скидки. Enterprise оплачивается по счёту, Pro — банковскими картами.
Ограничения
- Бесплатного пробного периода платных планов нет
- Pro рассчитан на одно место
- Enterprise предназначен для организаций от 150 сотрудников
- Перераспространение данных требует отдельного запроса
- Сервис сравнивает модели, но сам не генерирует тексты, изображения или видео
Платформы и интеграции
Соседи по смыслу
за последний месяц