Airuns
О проекте
Что такое Airuns
Airuns — это независимая лаборатория оценки ИИ. Мы сравниваем языковые модели, ACP-агентов и оборудование, чтобы помогать выбирать решения на основе проверяемых данных, а не маркетинга.
Принципы работы
- каждое измерение публикуется вместе с методологией, источниками и составом окружения;
- числа берутся только из опубликованных источников и всегда сопровождаются ссылкой и датой получения;
- вымышленные оценки, рейтинги и проценты не публикуются никогда;
- каталог моделей строится только по открытому источнику models.dev;
- реклама и платное размещение не влияют на результаты измерений.
Что мы публикуем
- Каталог моделей — Актуальные предложения поставщиков из открытого источника models.dev.
- Кодинг-агенты — Опубликованные результаты агентов на Terminal-Bench 2.1 и LMArena WebDev.
- Оборудование — Официальные результаты MLPerf Inference для LLM.
- Речь, изображения, видео — Мультимодальные модели из каталога models.dev.
Источники данных и лицензии
Все публичные данные на сайте берутся из перечисленных ниже источников. Каждая страница показывает ссылку на источник и время получения данных.
| Источник | Лицензия | Где используется |
|---|---|---|
| models.dev — каталог моделей и провайдеров | MIT | Каталог моделей и раздел «Речь, изображения, видео». |
| lmarena-ai/leaderboard-dataset — рейтинги арен | CC-BY-4.0 | Разделы «Рейтинги» и «Арены»: текстовые, визуальные, видео- и агентские арены. |
| Terminal-Bench 2.1 — бенчмарк терминальных агентов | Apache-2.0 | Раздел «Бенчмарки кодинг-агентов»: официальные сабмиты. |
| lmarena-ai/leaderboard-dataset — арена LMArena WebDev | CC-BY-4.0 | Раздел «Бенчмарки кодинг-агентов»: арена веб-разработки. |
| MLPerf Inference — результаты инференса | Apache-2.0 | Раздел «Оборудование»: датацентровые результаты для LLM. |
| Hugging Face — статистика моделей | условия Hugging Face | Раздел «Тренды ИИ»: скачивания и популярность моделей. |
| Epoch AI — долгосрочные тренды | атрибуция | Раздел «Тренды ИИ»: ссылки на независимые данные (без копирования чисел). |
Контакты
Вопросы, предложения и сообщения о неточностях: feedback@airuns.ru.