Точность оценки

Контекст рынка: TGGI 108.87 ▲0.01% · 2026-11-03 · индекс

Каждый сайт оценки говорит, что он точен. Почти никто не публикует число, которое может его скомпрометировать. Эта страница — такое число: насколько наши оценки расходятся с реальными ценами продаж на Fragment, измерено на продажах, которых модель не видела, с размером выборки и 95% интервалом рядом с каждой цифрой. Где мы плохи — там так и написано. Это статистика, а не обещания.

Статистика, а не обещания: бэктест — не прогноз, оценка — не цена, а хороший месяц — не гарантия.

Эту страницу определяют три правила

  1. Только вне выборки. Число, измеренное на данных, на которых модель настраивалась, не является доказательством. Мы показываем его отдельно, с пометкой «в выборке», и никогда как заголовок.
  2. Число публикуется, только когда оно достаточно точное. Доля становится заголовком, только если её 95% интервал не шире 10 процентных пунктов. Иначе она помечается как предварительная и показывается с n.
  3. Ничего не дописывается задним числом. Если число ухудшается, оно меняется здесь, с датой.

Короткая версия

ВопросОтветВыборкаМетка
Насколько типично ошибается оценка подарка?медианная ошибка 16.7% (95% ДИ 16.7–19.8%)999 продажзаголовок
Как часто оценка подарка попадает в ±20%?58.0% (54.9–61.0%)999заголовок
Насколько типично ошибается оценка юзернейма?медианная ошибка 28.2% (21.8–42.8%)170 продажпредварительно
Как часто оценка юзернейма попадает в ±20%?37.1% (30.2–44.5%)170заголовок
Что говорит живой форвардный журнал?9 закрыто, 141 открыто — ниже нашего порога 30—не публикуется

Если читать только одну строку: мы модель «флор плюс аналоги», а не оракул. До 10 GRAM мы ближе всего (12.5% медианной ошибки); выше 100 GRAM мы часто сильно занижаем — и ниже объясняем почему.

Подарки: медианная ошибка 16.7% и смещение выше 10 GRAM

Что измерялось. 5,834 реальных платных продаж на Fragment по 102 коллекциям, собраны 2026-10-31. Каждая продажа оценивается только по продажам строго до неё, сам предмет исключён. Используется флор, который наш сканер опубликовал днём ранее, никогда — в день продажи. Оценочное окно: 2026-10-20 .. 2026-10-31. Параметры выбраны на данных до 2026-10-25 и затем один раз оценены на холдауте, 2026-10-26 .. 2026-10-31.

Честный взгляд. В 31% оценённых продаж цена продажи была в пределах 0,5% от флора предыдущего дня, а на следующий день флор был выше или лотов стало меньше. В этих строках «флор» почти наверняка был собственной ценой проданного подарка. Живой сайт исключает собственный лот, поэтому такие строки льстят флорному центру. Таблицы ниже их отбрасывают — это консервативный взгляд, и именно он в заголовке.

По ценовым диапазонам — самая полезная таблица на странице

ДиапазонnМедианная ошибкаСмещениеВ ±20%Метка
<10 GRAM66212.5% (11.1–14.3%)0%69.6%заголовок
10–100 GRAM30634.4% (30–40%)−25%35.3%заголовок
100+ GRAM3173% (37–78%)−67%32.3%предварительно

Читайте столбец смещения буквально: выше 10 GRAM наш флорный центр систематически ниже того, за сколько реально уходят отдельные подарки. Подарок за 199 GRAM с редким фоном не стоит флора коллекции, и модель знает, что не учитывает это. Пока не выйдет гедонистическое обновление, считайте любую оценку выше 10 GRAM нижней границей с широким верхом, а диапазон 100+ — порядком величины, а не ценой.

Число, которое мы отказываемся ставить в заголовок

Если оставить строки, где флор, вероятно, был собственной ценой предмета, медианная ошибка падает до 1.35% (n = 1,453). Выглядит блестяще. Это артефакт измерения цены против самой себя. Оно остаётся в файле бэктеста для прозрачности и не появится ни в заголовке, ни в рекламе, ни в презентации.

Юзернеймы: 28.2% — и исправление, которое мы уже опубликовали

Наш публичный changelog модели раньше указывал для юзернеймов «медианную ошибку 5.2%». Это число в выборке: оно измерено на последних 90 днях продаж — ровно на том окне, где настраивались параметры модели. Это не доказательство будущей точности, и оно заменено на /ru/how-we-value датированной заметкой. Честное измерение — окно, которого модель не видела: медианная ошибка 28.2% (95% ДИ 21.8–42.8%), n = 170, 37.1% в пределах ±20% (30.2–44.5%). Число предварительное: интервал шире 10 пунктов.

Диапазон 12.2× означает: для имени, которое мы оцениваем в 100 GRAM, честный 80% интервал простирается примерно от 29 до 350. Это не полезный диапазон, поэтому для юзернеймов мы не показываем калиброванный интервал. Более широкий диапазон не честнее — это та же догадка в костюме. Оценки юзернеймов остаются как есть, с диапазоном, который мы можем защитить, а метод работает в теневом режиме до форвардных доказательств.

Подсегменты на холдауте: среднее скрывает провал

СегментnМедианная ошибкаКомментарий
Словоподобные имена9950% (40.0–58.5%)самый слабый сегмент
Имена из 4 букв4519.2% (15.4–20.1%)смещение +13.7% (мы завышаем)

Что говорит живой форвардный журнал (пока ничего)

Каждый день мы замораживаем стратифицированную выборку собственных оценок и сравниваем каждую с реальной ценой продажи, когда предмет продаётся. Сегодня: 9 закрыто, 141 открыто. Наше правило — живое число появляется только после 30 закрытых оценок, поэтому страница показывает счётчик, а не процент, и будет показывать счётчик, пока выборка не станет достаточной. Живой файл открыт: /data/valuation-accuracy.json. Мы могли бы опубликовать число по 9 продажам. Оно сдвигалось бы на десятки процентных пунктов с каждой новой продажей. Это не отчёт о точности, это шум с десятичной запятой.

Что показывает журнал находок и почему это не число точности

На 2026-11-02: 35 находок старше 24 часов — 17 подарков, 7 юзернеймов с фиксированной ценой, 11 юзернейм-аукционов. Итоги: 17 продано, 9 ещё в продаже, 9 неизвестно.

Оговорка, которая делает эти числа почти бесполезными как мера точности: находки — отобранная выборка, предметы, которые уже были выставлены ниже нашей оценки. Отбор гарантирует, что фактические цены скучятся у оценки или под ней, поэтому журнал показывает, что случилось с отмеченными нами лотами, но не может сказать, насколько точна модель в целом. Это могут только бэктест выше и форвардный журнал.

Чего эта страница не утверждает

Как нас проверить

Как мы оцениваемТрек-рекордОткрытые данныеИндекс

Вопросы

Медианная ошибка 16.7% — это хорошо?

Это честно, а не хорошо. Значит половина наших оценок подарков ближе 16.7%, половина — дальше. До 10 GRAM мы на 12.5%; выше 100 GRAM — на 73% (n = 31, предварительно). Кто называет одно число точности без диапазонов, скрывает верх рынка.

Почему вы выбрасываете строки из собственного бэктеста?

Потому что в 31% оценённых продаж флор предыдущего дня почти наверняка был собственной ценой проданного предмета — оценка измерялась против себя же. Оставив их, мы получили бы медианную ошибку 1.35%, которая льстит модели. Мы публикуем оба варианта и ставим в заголовок консервативный.

Вы гарантируете оценку?

Нет. Оценка — утверждение о сопоставимых продажах, а не обещание. Мы не устанавливаем цены, не покупаем и не гарантируем покупателя ни на каком уровне.

Где посмотреть исходные числа?

Живой файл точности — /data/valuation-accuracy.json, журнал находок — /track-record.json, а датасет дневных флоров открыт под CC BY 4.0 с DOI: 10.5281/zenodo.23897620.

Бэктест: 2026-10-31 · Живой журнал: 2026-11-02 · Страница: 2026-11-03