Ce que les développeurs pensent des avis de Steam

Depuis 2013, Steam permet à ses utilisateurs de laisser des commentaires sur la page Steam des jeux qu’ils ont achetés. En utilisant le système, les joueurs peuvent laisser une description écrite du jeu en question, puis lui attribuer une note binaire «Recommandé» ou «Non recommandé». Ces critiques sont ensuite regroupées dans les évaluations «récentes» et «globales» du jeu qui sont affichées sur la page Steam du jeu. Ces évaluations vont de “extrêmement positif” à “surtout négatif”.

En raison de l’omniprésence de Steam sur le PC, les critiques Steam sont devenues l’une des principales façons pour les développeurs de recevoir des commentaires sur leurs jeux. Mais que pensent les développeurs du système lui-même? Les revues Steam fournissent-elles un service bénéfique qui peut aider à améliorer les jeux? Ou s’agit-il d’une nuisance perpétuelle déformée par des critiques de bombardements et des critiques de «blagues» qui causent du stress et de la confusion aux personnes qui font les jeux auxquels nous jouons?

Pour le savoir, j’ai parlé aux développeurs de leurs expériences avec le système, je leur ai demandé ce qu’ils pensaient de ses avantages et inconvénients, et j’ai discuté de la question de savoir s’il y avait des améliorations évidentes à apporter au système. Je voulais parler à des développeurs solo ou des développeurs en charge de leurs propres studios, qui avaient une expérience directe de lecture et de réponse aux critiques Steam avec peu ou pas de tampon de modération. Ceux-ci allaient de la vaste communauté et des mises à jour perpétuelles de Rust, aux plus petits jeux de niche.

Leurs réponses ont porté sur des sujets tels que les plaintes communes des joueurs, l’éthique controversée de l’attentat à la bombe et le cas étrange de l’examen négatif de mille heures. Pour la plupart, cependant, les développeurs à qui j’ai parlé croyaient que les critiques Steam peuvent être une source utile de commentaires. «Les avis sur les produits sont excellents», explique Garry Newman, responsable de Facepunch Studios et créateur de Garry’s Mod and Rust. “Les avantages sont évidents. Vous pouvez avertir les gens si le jeu est de mauvaise qualité, ou cassé, ou leurs vêtements de vente est des conneries. Laisser une évaluation positive permet aux consommateurs de récompenser le développeur d’une manière supplémentaire. »Ils sont également conscients de l’utilité du système du point de vue de l’utilisateur. “Je pense que cela a autonomisé les joueurs”, affirme Bill Gardner. Anciennement concepteur de niveau à Irrational Games, Gardner est actuellement le réalisateur de TheDeepEndGames, dont la première sortie était le jeu d’horreur Perception de l’année dernière. “C’est un excellent moyen pour les joueurs de se faire entendre.”

Ce qui se passe dans la conversation avec tous les développeurs à qui j’ai parlé est le sérieux avec lequel ils prennent des commentaires de la communauté de leurs jeux. “En son cœur, la critique Steam est le feedback le plus brut non filtré que je vais avoir”, explique Phillip Bak, créateur du jeu de tir Bezier. “C’est à la fois excitant et terrifiant. Les joueurs payants ne sont pas connus pour leur courtoisie et pour être honnêtes et ne devraient pas l’être. “Bien sûr, cela ne signifie pas que les développeurs sont infiniment reconnaissants et font attention à chaque avis qu’ils reçoivent. Newman en particulier est entré en conflit avec sa communauté à cause de critiques dans le passé, comme dans ce post sur Reddit.

Bien que la plupart des développeurs accordent une certaine attention aux avis de Steam, l’impact d’un avis positif ou négatif varie énormément. Pour un jeu comme Rust qui a beaucoup de fans, une mauvaise critique est une goutte dans l’océan. “Nous sommes dans une position privilégiée où je pense que nous avons assez de bonne volonté dans la communauté pour que les évaluations n’aient pas vraiment d’effet sur nous”, dit Newman. “Nous pouvons faire bombarder la revue et les gens vont encore acheter nos jeux.”

Le cas est très différent pour un jeu comme Duskers, qui a une base de fans petite mais active qui communique fréquemment à travers les critiques Steam. «Avant les critiques de Steam, j’étais redevable envers Metacritic, et comme vous pouvez le deviner, il n’y avait pas assez de points de données pour les jeux indépendants», explique Tim Keenan, créateur de l’horreur de science-fiction inventive et claustrophobe. Ce jeu était l’un des favoris de RPS en 2016. «Maintenant, je peux créer un jeu de niche et le faire réviser par des gens qui se soucient de ces jeux. Quand je suis en développement, je peux scanner ces revues pour avoir une idée globale des choses auxquelles les joueurs ont du mal à faire face et les résoudre. “

Gardner, qui a expérimenté la rétroaction des utilisateurs en tant que petit développeur et en tant que membre d’un grand studio, explique qu’avec le développement général, la taille du public rend difficile la réponse aux préoccupations individuelles, ce qui est moins le cas dans le développement indépendant. “En AAA, vous êtes tout sauf garanti pour obtenir votre jeu face à des millions d’yeux. En tant que tel, les revues individuelles sont susceptibles d’être un peu plus édulcorées simplement en volume seulement », dit-il. “Vous ne serez capable de comprendre qu’une infime fraction des personnes qui ont joué à votre jeu. Avec Perception, je sens que j’ai pu comprendre les gens qui jouent beaucoup mieux. “

Alors que les revues Steam peuvent être utiles de cette manière, les développeurs soulignent qu’elles ne sont pas la seule source importante de feedback. “Je pense qu’il y a une tendance à donner plus de poids aux critiques des utilisateurs par peur”, explique Gardner. «Bien qu’il y ait évidemment une donnée concrète qui influe sur l’attrait de votre produit, l’impulsion de réagir aux critiques plutôt qu’aux commentaires peut être périlleuse», a déclaré M. Keenan. “Le seul souci est que cela a tendance à vous rendre fou, et que vous voulez répondre à toute mauvaise critique, ce qui serait épuisant.”

En effet, sentir le poids de l’Internet en appuyant sur votre jeu peut être une expérience stressante pour un développeur. “Lorsque des joueurs anonymes évaluent votre jeu, il est très difficile de se souvenir qu’ils sont des individus. Vous pouvez facilement les voir comme une voix unifiée et les peindre tous avec le même pinceau », explique Katie Goode, directrice artistique de Triangular Pixels, qui développe des jeux de réalité virtuelle tels que Unseen Diplomacy et Smash Hit Plunder. Même si un développeur est en mesure de recevoir et de digérer la majorité des critiques impartialement, tout examen particulier a le potentiel de causer une détresse considérable. «Toute révision peut affecter votre moral, la réputation et l’avenir de votre studio, ainsi que votre santé mentale», dit-elle.

Pendant ce temps, tout le monde ne trouve pas les commentaires Steam si utiles. “Je ne trouve pas les commentaires aussi utiles que les discussions du forum”, explique Cliff Harris, fondateur de Positech Games. “Ils sont souvent trop courts, ils sont récompensés pour être” drôles “, et les développeurs sont invités à ne pas y répondre dans la plupart des cas.” Harris fait référence aux capacités des utilisateurs à marquer les commentaires laissés par d’autres utilisateurs comme “utiles”. pas utile “ou” drôle “. Ces balises sont conçues pour permettre aux utilisateurs de filtrer des types d’avis spécifiques, mais elles peuvent également inciter les utilisateurs à rédiger des avis qui privilégient le fait d’être «drôle» plutôt que «utile».

Harris met la nature peu utile de Steam commentaires au faible pourcentage de joueurs qui quittent réellement les critiques. “Presque personne ne laisse de commentaires, environ 1%, de sorte que vous obtenez le ultra en colère, ou le temps ultra riche, qui ne représentent pas la majorité des joueurs. À moins que 5 à 10% des joueurs ne classent quelque chose, vous n’obtiendrez pas une évaluation réaliste d’un jeu. “

En effet, l’une des bizarreries de Steam critiques que presque tous les développeurs trouvent déconcertants, sont les critiques qui jouent au jeu en question pendant des centaines, parfois des milliers d’heures, et puis laisser une critique négative. “NOBODY est si pauvre en argent et en temps que 100 heures de divertissement pour 20 $ est une mauvaise affaire. Cela a l’air complètement stupide », explique Harris. Newman est d’accord. “Vous nous avez donné 20 $ et nous vous avons diverti pendant plus de 1000 heures. Quoi d’autre avons-nous à faire? “Cependant, Bak pense qu’il pourrait y avoir plus de valeur à ces revues que ce qui est initialement évident. “Ces critiques sont souvent les plus intéressantes, et je pense qu’un joueur qui a coulé autant de temps pourrait avoir beaucoup de choses utiles à dire. Souvent, les coups de pouce vers le bas me donnent plus de raisons d’acheter un jeu que les critiques positives. “

Les avis négatifs avec une durée de lecture ridiculement longue ne sont pas le seul type de critique qui pousse les développeurs à hausser les sourcils. Gardner, par exemple, est troublé par les critiques qui ont des temps de jeu très courts. “Une chose qui ne me plaît pas vraiment, c’est que les critiques avec si peu de temps de jeu ont le même poids que quelqu’un qui a terminé le jeu”, dit-il. “Peut-être s’il y avait des bassins de critiques séparés où il y a un minimum de temps requis pour entrer dans un groupe A par rapport au groupe B, où les gens ont seulement échantillonné.”

Une autre question litigieuse est le bombardement de révision, où les utilisateurs vont collectivement examiner un jeu négativement en raison d’une perception légère. Cela pourrait être un changement au jeu qu’une partie de la communauté n’aime pas, mais cela peut aussi n’avoir rien à voir avec le jeu. Une décision d’affaires controversée par un éditeur, ou une déclaration faite par le développeur avec laquelle la communauté n’est pas d’accord, peut à la fois mener à des jeux qui prennent un tour critique sur Steam.

“C’est terrible comment les utilisateurs peuvent utiliser les critiques pour bombarder les commentaires négatifs sur ce qui pourrait être un problème sans rapport”, dit Goode, “Acheter le jeu, écrire une ‘critique’ au développeur, puis le rembourser … c’est un problème pour tout le monde pour les développeurs, pour Valve qui semble permettre une haine immature et pleine de rage, et pour les joueurs qui essaient juste de voir s’ils peuvent aimer un jeu pour ce qu’il est à ce moment-là. “

Gardner est d’accord avec cela. “Lorsque les joueurs utilisent les critiques comme un outil pour faire une déclaration, cela peut être assez frustrant et en quelque sorte de rejeter tout le but des critiques tout à fait. Pour être clair, je suis tout pour que les joueurs s’expriment et se fassent entendre. Je pense juste qu’il y a des façons de le faire en dehors des examens d’empoisonnement. “

Mais ne devrait-il pas être aux utilisateurs de décider ce qui est important quand il s’agit de faire ou d’informer les autres sur un achat? Si, par exemple, un développeur se révèle être raciste, c’est un problème que beaucoup de joueurs voudraient savoir avant de soutenir le développeur avec leur argent. “C’est absolument juste,” dit Gardner quand je soulève le problème. “Je ne voudrais jamais dire aux gens comment utiliser leur voix. Personnellement, je pense que ce n’est pas la bonne voie pour ce genre de chose simplement parce qu’on ne sait pas où s’arrête ce genre de protestation … Nous avons tellement d’endroits pour remettre les pendules à l’heure avec les médias sociaux. Cependant, les critiques ont leur propre but. Ils sont là pour évaluer le travail. “

Les goûts généraux des joueurs et les préjugés peuvent aussi être un problème pour les développeurs sur Steam. Un problème que les joueurs évoquent fréquemment est la longueur du jeu, en particulier avec les jeux qui sont plus courts que la moyenne. “Nous avons fait une courte et courte période d’accès anticipé et avons beaucoup souffert de l’attitude des joueurs de Steam envers les parties courtes”, explique Jordan Thomas, co-fondateur de Question! et développeur de The Magic Circle. “Je ne peux pas vraiment blâmer le système d’examen lui-même, les joueurs mentionneraient la courte longueur de TMC même dans les critiques positives. Ils pensaient qu’il valait la peine d’avertir les gens. “Gardener a connu des problèmes similaires avec son jeu, Perception. “Nous voyons des commentaires très contradictoires. Le jeu dure environ 4 heures pour la plupart des gens. Je pense que la majorité a trouvé que c’était une bonne valeur, surtout si l’on considère les jeux qui se chevauchent. Mais il y aura toujours beaucoup de gens qui s’attendent à un minimum de 12-15 heures pour un jeu solo. “

Pour certains développeurs, il peut être difficile de mettre leur jeu sur Steam et de regarder le tsunami de critique qui en résulte. Mais il est important de noter que, contrairement aux critiques critiques où l’analyse et l’opinion sont généralement gravées dans le marbre, les développeurs peuvent agir changer la marée. En fait, Valve a récemment divisé les revues Steam en deux catégories, donnant la priorité aux dernières critiques écrites pour mettre en évidence les changements apportés au jeu.

“Le score dynamique fonctionne”, explique Goode. “En cette ère de correctifs et de mises à jour rapides, la pondération des nouvelles versions tient les utilisateurs et les développeurs informés de l’état actuel du jeu, plutôt que de l’état avec lequel il a été lancé.”

Cliff Harris, cependant, est moins enthousiaste au sujet de la nature flexible des évaluations de vapeur. «À peu près tout changement apporté à un système établi va faire baisser votre score», dit-il. “Si vous faites un changement que 90% des gens préfèrent, ils ne réagiront pas du tout, mais les 10% qui préfèrent l’ancien système laisseront des critiques négatives dans une proportion disproportionnée. Fondamentalement, changer quelque chose à un jeu existant peut être risqué. “

L’apathie positive semble être une préoccupation générale parmi les développeurs, cette notion que les joueurs heureux restent silencieux tandis que les joueurs insatisfaits crient le plus fort. Mais Newman croit qu’il existe un moyen de combattre ce phénomène – parlez-en. “Il y a quelque temps, nous étions critiqués pour certains changements apportés au jeu (quoi que nous fassions, nous obtenons une sous-section de joueurs qui ne sont pas heureux). Nous l’avons mentionné dans notre blog et nos commentaires sont devenus positifs pendant quelques jours », dit-il. “Cela a fonctionné parce que la grande majorité des gens qui apprécient le jeu ne l’ont pas examiné, alors ils ont décidé d’aider à lutter contre la négativité en nous donnant une critique positive.”

Y at-il quelque chose qui peut être fait pour améliorer encore les commentaires Steam? Mis à part la lutte contre les problèmes déjà mentionnés, la principale chose que les développeurs veulent voir, c’est plus de gens qui utilisent le système. “Incitez-les!” Dit Harris. “Le texte de ‘review’ est comme une réflexion après coup. Quelqu’un qui a joué & gt; 2 heures de jeu devraient avoir un peu de pop-up, comme le téléchargement de capture d’écran suggérant qu’ils donnent un coup de pouce vers le haut ou vers le bas, à tout le moins, “Bak est d’accord avec les joueurs. “Prix pour les meilleures critiques (projecteurs de développeur sur leurs favoris). 1% de réduction sur votre prochain jeu lorsque vous passez en revue le dernier que vous avez acheté. “

Cependant, les développeurs veulent que les joueurs utilisent le système correctement, en laissant des commentaires qui expliquent pourquoi ils ont aimé et n’aiment pas le jeu. Ils ne veulent pas particulièrement des critiques “blagues” qui n’offrent aucune information, et ils ne veulent certainement pas que leurs critiques Steam soient utilisées comme une plate-forme pour un grief plus général. “En fin de compte, il doit y avoir une autre façon de permettre aux utilisateurs d’exprimer leur mécontentement, plutôt que d’examiner les bombardements”, a déclaré Goode. “Les utilisateurs doivent également faire vérifier leurs avis par un robot – ils doivent avoir une longueur minimale, consistant en des mots qui ont du sens. Si une personne publie un avis susceptible d’affecter quelqu’un à un niveau personnel, il est normal qu’elle doive faire un minimum d’efforts. “

Enfin, Harris exhorte également les utilisateurs à se rappeler que, lorsqu’ils laissent une critique, à l’autre extrémité, c’est une personne qui la lira probablement. “Les gens qui revoient les jeux doivent se rappeler que pratiquement aucun développeur n’est vraiment avide ou malfaisant, ou incompétent”, dit-il. “Il y a de vrais humains, probablement stressés, fatigués, inquiets, et énormément investis émotionnellement, qui liront ce que vous écrivez sur ce qui est probablement les deux dernières années de leur vie.”