Pickbench
Пример отчёта

Pickbench Category Data: измеряйте, как ИИ-модели выбирают ваш бренд

Pickbench Category Data — одно заранее зарегистрированное измерение категории и выпуска на названных API-моделях. Сегодня мы измеряем долю выбора ИИ-моделью по моделям с 95-процентными доверительными интервалами и уровнями, а также названные моделями причины. Срезы по потребностям и бюджету публикуются там, где углублённый прогон категории даёт 30 задач на срез; по памяти моделей опубликованы исследования в 8 категориях, живой поиск в работе (STUDY-V1a), оповещения появятся скоро, а измерение агентов в разработке до проверки согласованности с поиском.

У каждой цифры указаны API-модели, панель, условия, дата и доверительный интервал. Мы обещаем измерение, но никогда — место, размещение или трафик. Места в рейтинге, включение и публичные строки никогда не продаются, а платящие заказчики раскрываются в реестре конфликтов интересов.

Из последнего выпуска чарта брендов ИИ

Смартфоны: доля выбора лидирующих брендов с 95-процентными доверительными интервалами; 5 ИИ-моделей, данные на 16 октября 2026 г..

бета: интервалы без калибровки для малых выборок

Быстрая панель: быстрые или компактные актуальные модели каждого разработчика, а не полная панель флагманов.

Только названия брендов: модели видели каждый вариант как название бренда, без фактов о товарах, и отвечали по собственным знаниям.

Панель: 5 ИИ-моделей
  • anthropic/claude-haiku-5.5-20261007 @ claude-haiku-5.5-20261007 via OpenRouter (20 %)
  • openai/gpt-6-luna-20260922 @ gpt-6-luna-20260922 via OpenRouter (20 %)
  • google/gemini-4-argon-20261013 @ gemini-4-argon-20261013 via OpenRouter (20 %)
  • mistralai/mistral-large-4-0-20261006 @ mistral-large-4-0-20261006 via OpenRouter (20 %)
  • deepseek/deepseek-v4.1-flash-20260910 @ deepseek-v4.1-flash-20260910 via OpenRouter (20 %)
Samsung
51 % (40 %–63 %)
Apple
48 % (35 %–60 %)
Google
46 % (33 %–58 %)

Линия: случайный выбор (25 %)

Пять модулей Pickbench Category Data

Одно измерение на категорию и выпуск, доступное каждому бренду и агентству в этой категории. У каждого модуля ниже указан честный статус: доля выбора и причины измеряются сегодня, по памяти моделей опубликованы исследования в 8 категориях, режим живого поиска с цитируемыми источниками — в работе, а оповещения об изменениях появятся позже.

  • Доля выбора ИИ-моделью · измеряется сегодня

    Как часто каждая названная модель рекомендует ваш бренд и конкурентов — по модели, потребности покупателя и бюджету?

    Измеряется по категории и модели сегодня с 95-процентными интервалами и уровнями: выпуск Pick Bench 2026-w43 (R = 3), 91 чарт категорий на быстрой панели из 5 моделей (87 по названиям брендов и 4 автомобильных с карточками фактов) и 20 битв. Срезы по потребностям и бюджету публикуются там, где углублённый прогон категории даёт 30 задач на срез. У витрины по брендам в Pick Bench есть опубликованный метод и проверочные тесты; в отчётах она появится после завершения финальной проверки формулировок.

  • Причины · измеряются сегодня

    Какие причины называют модели, когда выбирают ваш бренд или проходят мимо него?

    Структурированные коды причин из ответов моделей, сгруппированные по фактам о продукте и соответствию запросу покупателя. Подаются как самоотчёт моделей, а не причинные факторы.

  • Память моделей · реализована, ограниченный набор категорий

    Какие конкретные факты о вашем бренде каждая версия модели излагает ошибочно или устаревшими?

    Движок готов: опубликованы исследования в 8 категориях (ноутбуки, роботы-пылесосы, наушники и 5 категорий программ) и собраны базы фактов для 4 автомобильных категорий. Закрытые проверки по первоисточникам оценивают каждый факт как «верно», «устарело», «не найдено в записанной истории» или «не знает» и дают чек-лист правдивых исправлений документации.

  • Режим живого поиска и цитируемые источники · в работе

    Что рекомендуют модели при включённом веб-поиске и какие URL они цитируют?

    Идёт исследование STUDY-V1a (пока недоступно). Сравнивает выбор без поиска и ответы с веб-поиском в общих категориях и фиксирует цитируемые домены как связь на уровне домена, а не доказательство за или против бренда без проверки цитаты.

  • Изменения и оповещения · скоро, ещё не реализованы

    Что изменилось для вашего бренда со времени прошлого выпуска или выхода новой версии модели?

    В планах, пока не реализовано. Публикует изменения между выпусками, когда доверительный интервал не включает ноль, и запускает повторный замер при обновлении отслеживаемой модели.

Формат поставки сегодня: подписанный печатный HTML-отчёт (печать или сохранение в PDF через браузер) с квитанцией Ed25519, JSON-снимок и выгрузка в CSV. Выгрузка через API для подписчиков, личный кабинет по категории и автоматические оповещения об изменениях запланированы и пока не реализованы.

Как мы измеряем

  1. Реальные сценарии покупки

    Задача или сценарий — одна ситуация покупателя: задачи Pick Bench сочетают потребность с бюджетом (R = 3), а чарты k=4 и битвы используют портрет покупателя, сценарий и приоритеты без ценовых диапазонов. Интервалы кластеризуются по задаче или сценарию, поэтому повторный вопрос не считается новым доказательством.

  2. Названные API-модели

    Каждый результат называет API-модель и её версию, способ вызова, условия и дату. Никогда — потребительское чат-приложение.

  3. Интервалы и уровни

    Доли приводятся с 95-процентными доверительными интервалами. Бренды группируются по уровням с интервалами мест, без жёстких мест.

  4. Предварительная регистрация и подпись

    План анализа хешируется до запуска, а каждый опубликованный результат — это подписанный снимок данных, который может проверить любой.

Почему цифрам можно доверять

Барьер нейтральности

Места в рейтинге, включение, уровни, публичные строки, статус проверки, приоритет в MCP и влияние на ответы покупателям никогда не продаются. Платящие заказчики и клиентские бренды агентств указываются в реестре конфликтов интересов и помечаются рядом со своей строкой. Код рейтинга не читает данные биллинга, CRM, Лаборатории и партнёрских программ, а задачи заказчиков никогда не попадают в публичный бенчмарк.

Подписанные проверяемые данные

Каждый опубликованный результат — подписанный снимок данных с хешем содержимого и ключом подписи. Скачайте его и проверьте подпись сами; хеш предварительной регистрации публикуется с каждым результатом.

Открытый CLI

Инструмент командной строки с открытым кодом будет запускать такие же битвы на вашем собственном API-ключе и компьютере. Его результаты помечаются как результаты сообщества и никогда не смешиваются с официальными. Он ещё не опубликован.

Как мы продаём

  • Мы цитируем только уровень консенсуса панели с доверительным интервалом и никогда — результат отдельной модели.

Что мы обещаем и чего не обещаем никогда

Мы обещаем

  • Заранее зарегистрированное измерение с доверительным интервалом по подписанным записям прогонов, в сроки, установленные в вашем договоре, — или возврат денег.
  • Сроки поставки, окна повторных измерений после релизов моделей и сроки ответа поддержки закрепляются в вашем договоре, а не в публичных SLA (автоматические оповещения о релизах — в планах).
  • Своевременные версионированные исправления фактов по доказательствам по единому стандарту для каждого бренда, бесплатно.
  • Честный итог: нулевой эффект — тоже полноценный результат.

Мы никогда не обещаем

  • Место или уровень в публичном рейтинге.
  • Появление в ответах потребительских ИИ-ассистентов.
  • То, что запомнит следующая версия модели.
  • Трафик, пока пилот переноса его не подтвердил.

Продукты с оплатой за результат (в планах, пока недоступны)

Концепты дорожной карты — сегодня не продаются и недоступны. Они будут предложены только после валидации пилотов переноса и закрытых заранее зарегистрированных метрик. Оплата в будущем пилоте относится к измеренной закрытой метрике, а не к месту в публичном рейтинге; формулы оплаты фиксируются (хешируются) до базового замера.

  • Truth Repair (в планах, недоступно)

    Результат
    Ложный факт перестаёт повторяться
    Как измеряется
    Сегодня недоступно (в планах после запуска поисковых проб): верный ответ минимум в 4 из 6 систем с поиском минимум в 80 % проверок две недели подряд; представление без поиска отслеживается по каждой версии модели
    Цена
    1 500 $ за подключение плюс 400 $ за каждое исправленное представление, не более 4 000 $; оплата по факту исправления
  • Lift Sprint (8 недель, в планах, недоступно)

    Результат
    Рост доли выбора ИИ-моделями
    Как измеряется
    Сегодня недоступно (в планах): доля рекомендаций на закреплённой закрытой панели из 8 систем, 100 запросов-потребностей (30 % отложены), разность разностей против контрольных брендов
    Цена
    4 500 $; 50 % возвращается в зачёт, если основной результат нулевой
  • Verified Lift (в планах, недоступно)

    Результат
    Пилот устойчивого роста (в планах после валидации переноса)
    Как измеряется
    Сегодня недоступно (в планах): та же закрытая метрика, ежеквартально, после валидации переноса
    Цена
    2 000 $ в месяц плюс 400 $ за каждый процентный пункт нижней границы 90-процентного интервала, не более 8 000 $ в квартал. Измеряется по закрытой, заранее зарегистрированной метрике в собственном тесте бренда в Лаборатории и никогда не может изменить, купить или затронуть публичный результат, место или включение.
  • Launch Readiness (в планах, недоступно)

    Результат
    Факты о новом продукте согласованы и доступны краулерам до следующих срезов знаний моделей; усвоение отслеживается по релизам
    Как измеряется
    Сегодня недоступно (в планах): согласованность источников, попадание в Common Crawl, закрытая проверка представлений по каждому релизу
    Цена
    3 500 $; без оплаты за успех, пока прогнозы не откалиброваны

Предварительные цены в долларах США. До запуска они могут измениться.

Предложения и цены

Одно измерение на категорию и выпуск доступно любому бренду или агентству в этой категории по единой цене и без эксклюзивности. Доступны бесплатные публичные уровни категорий после допуска витрины по брендам (Pick Bench скоро откроется), разовый Category Report ($490), подписка Category Data ($490/мес.), тариф Agency ($499/мес., до 3 клиентских брендов) и индивидуальные исследования по запросу.

Предварительные цены в долларах США. До запуска они могут измениться.

  • Бесплатный

    Для всех

    0 $

    • Pick Bench (бенчмарк моделей и голоса посетителей) — скоро откроется
    • Публичные доски категорий и битвы брендов
    • Бесплатное исправление фактов по доказательствам
    • Уровень консенсуса с 95% интервалом и интервалом места
    • Названные моделями причины, а не причинные факторы
    • У каждого результата дата и названные API-модели
  • Category Report

    Один бренд в одной категории

    490 $, разово1 бренд в 1 категории

    • Текущий выпуск в полной детализации для вашего бренда и категории
    • Доля выбора ИИ-моделью по моделям с 95-процентными интервалами. Срезы по потребностям и бюджету — где углублённый прогон категории даёт 30 задач на срез
    • Названные моделями причины, память моделей в доступных категориях и живой поиск в работе
    • Подписанный печатный HTML-отчёт, JSON-снимок и экспорт в CSV
  • Category Data

    Подписка на данные категории

    490 $ в месяцза бренд и категорию

    • 1 бренд в 1 категории; первый месяц включает полный Category Report
    • Каждый новый выпуск и повторные замеры после выходов моделей
    • Подписанный печатный HTML-отчёт, JSON-снимок и экспорт в CSV; выгрузка через API для подписчиков в планах
    • Сравнение изменений между выпусками и оповещения о релизах — скоро
  • Agency

    Агентства и консультанты

    499 $ в месяцза категорию (до 3 брендов клиентов)

    • 1 категория, до 3 клиентских брендов
    • Готовые отчёты для клиентов с указанием Pickbench и ограничений метода
    • Каждый выпуск по категории с подписанными отчётами, JSON-снимками и экспортом в CSV
  • Индивидуальное исследование

    Бренды и агентства

    По запросу

    • Исследования под задачу по запросу на том же заранее зарегистрированном движке измерений
    • Нестандартные категории, базы фактов или углублённые сравнения вне обычных выпусков
    • Подписанный печатный HTML-отчёт и JSON-снимки; задачи заказчика никогда не попадают в публичный бенчмарк

Ни один тариф не покупает место, включение, уровень, публичную строку, статус проверки или размещение. Публичные строки одинаковы для платящих и неплатящих брендов, платящие заказчики раскрываются в реестре конфликтов интересов, а исправления фактов бесплатны для каждого бренда.

Публичный чарт брендов ИИ

Чарт брендов ИИ публичен и бесплатен, а Pick Bench скоро откроется: в каждом выпуске указаны модели, условия и дата, а уровни показаны с интервалами. Pickbench Category Data применяет тот же метод в полной детализации к вашей категории, конкурентам и потребностям покупателей.

Запросить пример отчёта

Расскажите о вашем бренде или агентстве. Мы пришлём пример Category Report и разберём с вами выпуск Category Data для вашей категории.

Что будет на демо

  • Пример Category Report по слайдам и то, как измеряется каждая цифра.
  • Какие модули подходят вашей категории и вашим вопросам.
  • План измерения, который вы проверите до любого запуска.

Запросить пример отчёта

Эта форма пока ничего не отправляет (предварительная версия). Введённое не покидает страницу и нигде не сохраняется.

Все поля, кроме сообщения, обязательны.

Несколько брендов перечислите через запятую.

Что вы хотите измерить?