[Перевод] Состояние алгоритма: что происходит с инди-разработчиками в Steam?
Бизнес создания инди-игр всегда был сложным, но недавно он стал ещё сложнее. 5 октября прошлого года Valve объявила о внесении изменений в алгоритмы Steam, которые привели к уменьшению трафика у игр, не ставших бестселлерами. Это уже вредит инди-разработчикам, но я думаю, мы только начинаем ощущать влияние этих перемен.
Возможно, вы знаете об «октябрьском баге» (October Bug) Steam, и, возможно, слышали. что этот баг устранили. Но ситуация несколько сложнее. К сожалению, никто за пределами Valve не знает точно, что происходит; данные просто недоступны. Но я, как смог, постарался проанализировать ситуацию. Насколько я понимаю, события развивались в следующем порядке:
- 5 октября раздел «Похожие товары» (More Like This), отображаемый на странице каждой игры, начал рекомендовать только небольшое количество игр-бестселлеров, обычно слабо похожих на игру со страницы.
- Соответственно, многие разработчики заметили резкое снижение трафика на их страницы в магазине. На форумах разработчиков Steam началось обсуждение. В этой теме уже набралось 60 страниц комментариев. По моим наблюдениям, для многих игр эта потеря трафика была связана со снижением присутствия в «Списке рекомендаций» и в «Основном кластере (персональные рекомендации)», и вызвано это было не в первую очередь изменениями в «Похожих товарах».
- 9 октября раздел «Похожие товары» снова начал показывать предыдущие рекомендации, но в общем случае трафик на страницы магазина не восстановился.
- В начале декабря, во время споров о том, что Valve предлагает более выгодную долю дохода играм-бестселлерам, Джейк Биркетт начал обсуждение о снижении трафика в Twitter и в своём блоге. Кульминацией этих обсуждений стали статьи в PC Gamer и Kotaku.
- 4 декабря Valve опубликовала заявление с объяснением:
- 5 октября компания развернула в Steam код, который »… изменил стандартные параметры поисковых запросов, чтобы на них больше, чем раньше влияли продажи и активность в списках желаемого (wishlists)».
- «Это изменение повлекло за собой ненамеренный побочный эффект в виде снижения приоритета меток в разделе «Похожие товары» на странице игры в магазине».
- «Чтобы устранить ошибку, 9 октября мы изменили алгоритм раздела «Похожие товары» для повышения приоритета похожести меток. Однако мы всё равно сохранили часть изменений, учитывающих продажи и популярность в списках желаемого. 30 октября мы снова повысили вес подобия меток в соответствии с наблюдаемыми нами результатами».
«Так как внеся изменения в рекомендации Steam уничтожил в начале октября мои доходы, теперь, увы, без разницы, будет ли он брать 30% или меньше. Остаётся надеяться, что они исправят сломанное/изменённое».
Valve хочет показывать людям игры, которые им нравятся. Компания замечает в своих новостных обновлениях, что иногда при работе над алгоритмами некоторые игры получают меньше трафика, а некоторые игры — больше. Но мне кажется, самое важное в том, что произошедшее с трафиком «Списка рекомендаций» (Discovery Queue) — это гораздо более масштабные изменения. Похоже, что игры, которые не находятся среди самых популярных, больше не оказываются в определённом классе видимости. Вопрос не в том, что некоторые игры выигрывают, а некоторые проигрывают. Теперь меньше трафика отправляется огромному количеству игр, не соответствующих какому-то неизвестному пороговому значению ежедневного дохода.
«Ого, GreyAlien действительно не шутил, в октябре steam_games сделали нечто, убившее трафик к куче инди-игр. Поглядите на это снижение базовой линии до 0».
Похоже, что октябрьские изменения влияют на «Список рекомендаций» (Discovery Queue) и основной кластер. При создании рекомендаций алгоритм теперь больше принимает во внимание доход от игры. В результате похожесть меток меньше влияет на то, какие игры будет рекомендовать вам Steam.
«Ого, я только что проверил… изменения огромные:-/»
Valve рассказала нам, что случилось с виджетом «Похожие товары», но умолчала о теме трафика в «Списке рекомендаций» (Discovery Queue) и главной странице. Непонятно, какая связь между багом «Похожих товаров» и изменениями в этих системах. Мы только знаем, что они произошли одновременно. Возможно, изменения трафика стали ещё одним побочным эффектом того же бага, но Valve просто этого не заметила. А возможно, компания намеренно изменила системы рекомендации так, чтобы они чаще показывали игры-бестселлеры. Как бы то ни было, похоже, что это теперь новый стандарт магазина.
«Чтобы не оставаться в стороне, тоже построил график. Переходы с «Похожих продуктов» снизились с 5 сентября на 70%. Кажется, снижение началось с 5 октября. Корреляция не означает причинности, но по сравнению с сентябрём в октябре доходы снизились на 50%, а ноябрь будет ещё хуже.»
В сентябре 2014 года Valve выкатила в Steam обновление списков рекомендаций (Discovery). Чтобы приспособить магазин к быстро нарастающему количеству добавляемых игр, компания предприняла серьёзные усилия для персонализации страницы магазина, стремясь показывать пользователям игры, которые могут быть им интересны. Эти изменения, наряду с обновлением Discovery 2.0, появившимся в ноябре 2016 года, позволили показывать пользователям интересные игры, которых бы они в противном случае не увидели. По сравнению с цифровыми магазинами мобильных платформ и консолей, Steam показывает более разнообразный и интересный набор игр. На самом деле, я считаю, что усилия Valve по улучшению рекомендаций стали основной силой, ослабляющей воздействие «индипокалипсиса», которого все боялись на протяжении последних пяти лет.
«Единственная надежда на достойные продажи в Steam многих инди в том, что «Списку рекомендаций» вернут прежний вид ИЛИ изменят его так, чтобы он показывал среди «популярных игр» и мелкие инди-игры с хорошими отзывами».
Поэтому смещение алгоритма в сторону более популярных игр и бестселлеров — это серьёзный вопрос. Для нишевых игр трафик из «Списка рекомендаций» — один из наиболее важных источников трафика в Steam. Одна из причин, по которой он так важен, заключается в том, то люди, изучающие свой список рекомендаций, в буквальном смысле ищут новые игры. Если кто-то в Steam и хочет найти незнакомые им игры, так это пользователи «Списка рекомендаций».
Ещё один фактор заключается в том, что «Список рекомендаций» реагирует на повышение продаж созданием дополнительного трафика. Ларс Дюсетт задокументировал эффекты положительной обратной связи, созданной системами Steam после того, как ютубер TotalBiscuit выпустил обзор его игры Defender’s Quest. Эти системы приводят к эффекту усиления маркетинга, который способен обеспечить разработчик, делая эти меры гораздо успешнее, чем если бы автор занимался этим в одиночку.
Наконец, одна из самых важных функций «Списка рекомендаций» заключается в том, что за последние несколько крупных распродаж Valve предлагала пользователям в качестве награды за изучение своего списка карточки. Большинство игр во время распродаж Valve никогда не рекомендует, поэтому увеличившийся трафик от «Списка рекомендаций» был жизненно важным источником видимости игры.
«Забавный факт: инди, по которым сильно ударили изменения в алгоритме Steam (а многие из них продавали потрясающие игры, показатели которых раньше были хорошими), теперь получают наихудшие продажи за всю историю. И да, ситуация не изменится. Из этой ямы им не выбраться с помощью даже хороших распродаж. Ура».
«Вот что я имею в виду. Это игра, какое-то время находившаяся в раннем доступе, у неё достойное и расширяющееся сообщество. Игра выглядит достаточно качественной и постепенно она должна была прийти к громкому релизу. Но потом… пшик. На графике показан первый день продаж в Steam, обычно это самый высокий пик (чтобы разглядеть его, придётся прищуриться)».
Это не первое изменение в системах рекомендаций, которое привело к изменению в трафике. Valve настраивала эти системы с самого момента их появления. Но октябрьское изменение примечательно тем, насколько значительным и масштабным стало его влияние. Широкомасштабное снижение трафика — это плохо для инди-игр и, по моему мнению, плохо для индустрии. Надеюсь, что Valve уделяет внимание происходящему и решит обратить изменения вспять.
«Слышу от многих разработчиков, что от зимней распродажи Steam они получили половину или треть того, что обычно получали по праздникам. Valve произвела индипокалипсис.»
Valve не владеет ничьим трафиком. Но она собирается доносить эти просмотры до пользователей, и я очень хочу, чтобы она была аккуратна и не похоронила нишевые и инди-игры. Хотя популярность и является значимыми данными, она не гарантирует интересность игры для игрока или её качество. А в «Списке рекомендаций», где игроки ищут ещё неизвестные им игры, популярность — это особенно неудачная метрика для подбора соответствия.
Причудливость — это замечательно. Разнообразие — это великолепно. Стремление к нишевости — это отлично. Но подобные типы игр естественно не становятся бестселлерами. Если теперь для систем рекомендаций в Steam обязательным требованием становятся продажи, то мы больше не увидим игр подобного типа. Их станет меньше. У разработчиков будет меньше свободы в экспериментах. И это окажется огромной потерей.
«Steam отслеживает мои предпочтения со снайперской точностью». Игры рекомендованы, потому что пользователь играл в игры с метками Singleplayer и Multiplayer.
Кроме того, что эти изменения плохи для мелких игр, они, похоже, делают «Списки рекомендаций» менее эффективными в предоставлении рекомендаций для каждого пользователя. Рассматривая более узкое множество игр, «Список рекомендаций» даёт менее уместные рекомендации. За последний месяц я просмотрел более 400 рекомендаций из моего личного «Списка рекомендаций». И похоже, что в основном я получаю плохо таргетированные рекомендации популярных игр с малым количеством совпадающих меток. (В следующей статье я представлю более глубокий анализ этого массива данных.)
«Это потрясающе. Инди-игра разработчика, пожелавшего остаться анонимом. Она была в магазине долгие годы… и впервые за это время количество списков желаемого СНИЖАЕТСЯ. Такого никогда не происходит на распродажах Steam. Трафик стимулирует больше добавлений в списки желаемого, чем продаж. Он НЕ получает трафика. Игру покупают только те, кто когда-то занёс её в wishlist.»
Опрос Ларса Дюсетта от начала декабря показывает, что самая большая проблема для инди-разработчиков — это «как сделать так, чтобы меня не проигнорировал алгоритм». То что мы видим с октября, как раз и служит источником таких тревог. Разработчики находятся во власти Valve и вынуждены теперь приспосабливаться к этому новому статус-кво. Если у вас есть в Steam выпущенная или скоро выпускаемая игра, то посмотрите на свои показатели трафика и дохода с октября. Сравните последнюю зимнюю распродажу с предыдущей. Возможно, вам понадобится пересмотреть свои прогнозы доходов или увеличить маркетинговый бюджет, потому что вы, вероятно, получаете меньшее присутствие, чем привыкли.
«Я предполагаю, что если октябрьские изменения не откатят, то с мая-июля этого года мы начнём наблюдать кризис инди, потому что снижение продаж в Steam окажет слишком большую нагрузку на многие инди-студии.»
Valve сообщила, что работает над новой системой рекомендаций на основе машинного обучения, поэтому мы знаем, что изменения снова грядут. Тем временем, если бы Valve просто вернулась к системам рекомендаций в том виде, в каком они находились в сентябре, одно это стало бы победой. Кроме того, я бы с радостью увидел улучшенные алгоритмы рекомендаций Steam. Я хочу, чтобы «Список рекомендаций» правильно отображал высококачественные игры, соответствующие вкусам пользователя. Не думаю, что мы когда-нибудь полностью избавимся от популярности как метрики для видимости игр, но надеюсь, что Valve сделает так, чтобы её влияние не подавляло другие факторы, особенно в таких функциях, как «Список рекомендаций».
