Hotslogs неточен: Быстрое сравнение статистики от CriticKitten

30.05.2018 20:13 Аналитика Автор: 580 0

Автор рубрики Математика Шторма, Critic Kitten рассуждает о точности показателей HotsLogs. Далее от его лица.


В прошлом часто можно было услышать, что HotsLogs — ненадежный источник информации по разным причинам, в основном в связи с маленькой выборкой и другими тому подобными вещами. Так что, когда разработчики выложили собственную статистику для всех героев поддержки, я посчитал, что это была бы прекрасная возможность проверить это высказывание.

Во-первых, вот ссылка на пост разработчиков из АМА,чтобы вы сами увидели данные.


Я постарался создать модифицированную версию моей обычной сравнительной таблицы, чтобы сравнить данные от разработчиков с данными HotsLogs, используя стандартные нормы погрешности как основу для отслеживания отклонений. Я поставил фильтр в HotsLogs только на игры платиновой лиги и мастеров, потому что не смог повторить фильтр «10+ уровень», который обычно используют разработчики.

Результаты, к которым я пришел, были… достаточно неожиданными, и, так как доступ к моему Твиттеру ограничен, я решил, что должен поделиться ими с сообществом.


И вот к чему я пришел




Вы также можете при желании взглянуть на таблицы, которые я использовал в своем сравнении.

Части с зеленым текстом имеют погрешность в пределах нормы, что означает, что HotsLogs достаточно точен для этих героев. Части, отмеченные зеленым фоном с белым текстом, имеют погрешность в 50% от нормы, что означает, что они точны полностью. И, наконец, части с красным текстом выходят за пределы нормы погрешности, что означает, что HotsLogs неточен в конкретных значениях процента побед.

Вывод


HotsLogs на удивление точен в своих данных. Несмотря на небольшую выборку, данные HotsLogs достаточно точны почти для каждого героя поддержки, за исключением Декарда. С учетом того, сколько отличий между тем, как HotsLogs и разработчики осуществляют фильтрацию, и того, что я не смог настроить фильтр так же, как разработчики, это достаточно внушительный результат. 

Конечно, нельзя сказать, что в ресурсе совсем нечего исправлять. В частности, я думаю, что стоило бы добавить фильтрацию по уровням, как у разработчиков, чтобы пользователи могли получать более точную информацию. А то, что эти данные были настолько точными, вовсе не означает, что мы должны игнорировать факторы, которые потенциально могут искажать реальность: предпочтения пользователей, которые предоставляют информацию HotsLogs; большая неточность у непопулярных героев, которыми пользователи играют не так часто. В любом случае, я считаю, что говорить «Hotslogs неточен» некорректно. HotsLogs не является правдивым на 100%, но данные этого ресурса (считающегося несерьезным) достаточно для того, чтобы получить полную картину происходящего. По крайней мере, пока API Blizzard полностью закрыт.


Оригинал

Автор: CriticKitten

Перевод: Артур Давтян

%%%time%%%
%%%name%%%
%%%message%%%