Лучшая игра 2020 на PlayStation по версии YGS
Всем привет. Результаты были получены на основе оценок игроков, которые они ставили играм в своем профиле в течение года. Для сравнения так же были опрошены 34 эксперта и п�� методу Кондорсе выявлена лучшая игра.
Оценки играм на YGS могут ставить только авторизованные игроки и только тем играм, которые есть в их PSN-профиле.
Нас интересует желтая круговая диаграмма - общая оценка впечатления об игре. Рассчитывается она как среднее арифметическое от всех голосов.
Выгружаем статистику по всем играм с сайта, получаем таблицу.
Колонки слева направо:
- название игры
- платформа
- общая оценка впечатления (желтая диаграмма)
- количество голосов
- итоговый рейтинг впечатления
- год выпуска игры
Последние две колонки добавлены вручную. Итоговый рейтинг впечатления рассчитывается на основе формулы Байеса:
(CхG+25х6.3)/C+25
Где:
C - количество голосов у игры.
G - общая оценка впечатления.
25 - количество голосов, с которыми будем сравнивать.
6.3 - средняя оценка впечатления по всем играм, с которой будем сравнивать.
Формула нужна, чтобы учитывались не только общая оценка впечатления, но и количество проголосовавших. Иначе в топе были бы игры всего с одним голосом и оценкой 10 баллов. Те, кто читали анонс к этому эксперименту, могут заметить, что формула немного изменилась. Это связано с тем, что реальная средняя оценка впечатления по всем играм сайта оказалась не 6.7, а 6.3. А реальное количество голосов у игр оказалось гораздо меньше, чем предполагалось. Поэтому со 100 опустились до 25.
Напомню этапы, по которым определяем победителя:
- На основе итогового рейтинга впечатления выгружаем ТОП5 игр, которые вышли в 2020-м году.
- Рассылаем список этих игр экспертам.
- Подсчитываем очки на основе голосов экспертов.
По сути, игра года будет определена уже на первом этапе. Второй и третий нужны для сравнительного анализа между мнением тех, кто действительно играл, и теми, кто мог не играть, но разбирается в играх. Такими экспертами были игроки из ТОПа рейтинга, известные и не очень известные игровые блогеры.
Так как отдельно не обсуждал, можно ли упоминать того, кто принял участие в опросе, то оставлю решение за самими блогерами. Ссылку на результаты они получат. Если захотят высказать мнение в комментариях, я буду рад услышать.
Итак, лучшими играми 2020 года по мнению игроков стали: Final Fantasy VII Remake, Ghost of Tsushima, Одни из нас: Часть II, Resident Evil 3, Mafia II: Definitive Edition. Порядок случайный. С помощью рандомайзера я перемешивал игры и отправлял такие списки экспертам. Выглядело вот так:
В ответ они присылали свои варианты, на основе которых я сформировал профили предпочтений, дав буквенное обозначение каждой игре. Всего вышло 20 уникальных.
На основе профилей предпочтений была сформирована таблица:
Было подсчитано, сколько человек выбрало игру "а" лучше игры "b" и наоборот; игру "a" лучше игры "c" и наоборот и так далее по всем играм. Например, мы видим, что игру "e" посчитали лучше игры "d" 28 экспертов. В то время как игру "d" лучше игры "e" всего 6.
В текущей ситуации игра "а" становится победителем по методу Кондорсе, так как при попарном сравнении она обходит всех остальных кандидатов: игру "b" со счетом 18:16, игру "с" со счетом 27:7, игру "d" со счетом 30:4, игру "е" со счетом 26:8.
Давайте узнаем, какие игры в опросе экспертов к каким буквам относятся.
"е" - Final Fantasy VII Remake.
"d" - Mafia II: Definitive Edition.
"с" - Resident Evil 3.
"b" - Ghost of Tsushima.
"а" - Одни из нас: Часть II.
С небольшим перевесом самая неоднозначная игра года стала лучшей по мнению экспертов. Цусима была близка, очень близка.
После того, как эксперт присылал мне свою цепочку игр, я задавал ещё один вопрос: "Во сколько из этих пяти игр ты играл?" Заранее предупредив, что ответы будут обезличены. Итог такой:
Как видно, во все пять игр из подборки играло только 8.8 % экспертов. Почти половина (47 %) играло не более, чем в три игры. Так как не уточнялось, в какие именно, можно предположить, что итоговый результат экспертов не совсем объективен. Действительно, есть вероятность, что, скажем, в Final Fantasy VII Remake играли единицы экспертов. Соответственно, не представляя в полной мере, что дает игра, ставили её обычно в конец списка. Впроче��, так можно сказать про любую игру.
Теперь узнаем мнение игроков, которые ставили оценки играм на сайте, прежде чем устроить экспертам взбучку за Last of Us.
Упорядочиваем таблицу по итоговому рейтингу и оставляем в фильтре только 2020-й год. Получаем:
Поразительное единение мнения игроков и экспертов по поводу ТОП3. Победителем снова стала вторая часть приключений Элли.
Эксперимент затевался, как альтернатива существующим рейтингам, премиям и опросам. Главное отличие - голосовать можно только за те игры, которые есть на твоем аккаунте PSN. Доверия к таким оценкам выше.
На данный момент на сайте отсутствуют игры с PlayStation 5, поэтому результаты могли быть другими.
Чем больше голосов, тем более достоверными будут выводы. Сейчас данных маловато для категоричного решения.
Это именно ТОП игр на PlayStation, а не ТОП игр вообще. Hades, Animal Crossing: New Horizons, Half-Life: Alyx и прочие никак не учитываются.
В целом, эксперимент считаю успешным. Большое спасибо экспертам, которые откликнулись и приняли участие. Надеюсь, такой подход найдет своих сторонников и статистики на сайте станет в разы больше, чтобы в следующий раз выбор лучшей игры был более объективен.
Используя другие методы оценки, можно получить совсем иные результаты. Пока такой подход считаю наиболее подходящим. Если знаете другие методы / формулы, готов обсудить. Позже на сайте добавим раздел, в котором будет выводиться ТОП100 игр согласно формуле Байеса.
У меня всё.