Есть ли хорошие новости?

Я уже так много рассказал о том, как можно использовать статистику неправильно, что вам, наверно, уже интересно, полезна ли она для чего-нибудь. Ответ: да, полезна.Если у вас есть вопрос, на который вы не можете ответить интуитивно, и он требует математического расчёта вашей кривой затрат и прогресса, вы сможете сделать полезные выводы с помощью статистики… если зададите правильные вопросы, и если соберёте правильные данные.

Приведу пример случая, когда статистика очень пригодилась при разработке игры.Я работал в компании, которая разрабатывала онлайн игру, и мы обнаружили, что количество игроков и число сыгранных партий стали уменьшаться, потому что некоторое время мы не выпускали обновлений. (Это было ожидаемо. Я заметил, что при отсутствии обновлений, онлайн игра теряет примерно половину основных игроков приблизительно каждые 6 месяцев, по крайней мере, исходя из моего опыта.)

Но мы не ожидали следующего: как-то раз одному из наших разработчиков стало скучно, и он создал бота для проведения викторины, небольшой кусочек кода, который заходил на сервер под своим собственным игровым аккаунтом, рассылал вопрос викторины каждые пару минут, а затем анализировал чат игроков на предмет правильного ответа.

И эта викторина пользовалась популярностью, как бы глупо и просто это не было, потому что представляла собой недолгий мгновенный каузальный игровой опыт.

А теперь главный вопрос: что произошло с игроками и что произошло с самой игрой, с той игрой, в которую игроки должны были по идее играть (в которой они бы заходили в чат, чтобы найти с кем посоревноваться, перед тем как их бы отвлек бот с викториной)?

Некоторым игрокам очень нравился бот с викториной. Им было чем заняться между партиями.Другие терпеть не могли бота с викториной, они утверждали, что им было сложнее найти игроков для партии, потому что все, кто был на тот момент в игре, были слишком заняты тем, что отвечали на глупые вопросы викторины вместо того, чтобы играть в игру. Кто был прав?Интуиция в данном случае нам не помогла, потому что интуиция подсказывала всем по-разному.Также не подходил вариант прислушаться к игрокам, потому что та группа игроков, которая высказывала своё мнение, была ориентирована на одно направление, а возможности опросить тех, кто не высказывал своё мнение, не было.Также не подходила возможность использовать математический расчёт, потому что бот с викториной не был частью игры, не говоря уже о кривой затрат. Можно ли было ответить на этот вопрос с помощью статистики? Конечно, и мы так и поступили!

Это было довольно просто и не требовало детального анализа. Нужно посчитать количество всех входов в игру за день. Затем посчитать количество сыгранных партий.

Так как на нашем сервере и таксохранялся каждый вход в игру, выход и начало игры, у нас уже были эти данные, и всё, что нам нужно было сделать, это провести простой анализ, чтобы определить, как эти величины изменились с течением времени.Как и ожидалось, с момента последнего релиза все показатели постепенно уменьшались, но, вообще-то, бот с викториной способствовал заметному повышению количества входов в игру и числа партий.Оказалось, что игроки заходили в игру и играли с ботом в викторину, но пока они находились в игре, они также играли партии друг с другом!Это был вывод, к которому было бы невозможно прийти каким-то определённым способом, без анализа точных данных.И так мы выучили нечто очень важное для онлайн игр: лучше, когда онлайн много игроков, которые взаимодействуют друг с другом… даже если они взаимодействуют нестандартным способом.