Le béta-test est devenu tellement important actuellement que j’avais envie d’écrire un petit truc dessus, basé sur ce que je sais, sur mon expérience, sur mes relations. Si vous avez des objections, des choses qu’il vous semble important de rajouter, des points à éclaircir, ou juste discuter, les commentaire sont-là pour ça.
Définition
Un béta-test existe, selon moi, non pas pour traquer les bugs, mais plus précisément pour tenter d’obtenir un avis différent au niveau du gameplay et de son équilibrage que celui des développeurs.
Ces derniers, souvent, sont d’ailleurs de piètres joueurs. Ils connaissent la technique, mais font preuve de grosses lacunes en ce qui concerne l’équilibrage, le plaisir de jeu… . Ainsi, la seule façon pour obtenir un avis différent est de publier une version, plutôt aboutie au niveau technique, et restreinte à un nombre réduit de personnes ( 300 à plusieurs milliers selon le type de jeu et de béta )
On peut, je crois, affirmer qu’il existe deux vrais types de béta-tests :
Closed-Béta
Comme son nom l’indique, c’est une béta restreinte à un petit nombre de personnes, souvent des habitués du forum officiel, parfois de vrais fanboys également. Je vais prendre comme exemple la récente ouverture des inscriptions de la béta de Supreme Commander. Le premier filtre a eu lieu lors de l’inscription a la béta. Seules les personnes possédant déjà un compte avant l’ouverture des inscriptions pouvaient espérer être prises, la candidature des autres étant automatiquement rejetée.
Un premier filtre donc pour séparer les connaisseurs du jeu des clanpins passant par là.
Le deuxième filtre a lieu lors de la délibération. Une personne ayant quelques centaines de posts à son actif, posts "intelligents" bien sûr, a une plus grande chance d’être sélectionné qu’une personne n’ayant jamais participé.
Légitime ? Productif ? On verra après.
Open-Béta
Peu ou pas de restriction quand au nombre de personnes prises. Elle intervient parfois après la closed-béta dans certains types de jeu, les MMORPG’s par exemple, pour effectuer un test à grande échelle des serveurs, un stress-test comme ils disent. Les développeurs, généralement, n’attendent plus grand chose des open-bétas, ils ne recoivent que peu de feedbacks, la moitié ne valant rien. Une béta quasiment purement technique donc.
The ways it’s meant…
Dur de définir si la closed-béta est réelement productive. Je pense que si, dans la majorité des cas. Les développeurs reçoivent suffisemment de feedbacks potables pour avoir matière à travailler. Sur ce plan, le concept est respecté.
Le problème vient, comme d’habitude, des joueurs, l’exemple le plus flagrant étant Battlefield 2.
Le Béta-test de BF2 a été très (très) restreint, a vrai-dire, je ne crois même pas en avoir entendu réelement parler. Le problème vient du fait que BF2 a été testé par des clans de BF1942.
Ces clans, rodés à la mécanique BF, connaissant toutes les finesses de BF42, se sont empressés de chercher les failles, les exploits de BF2, tout jeu en a, BF2 en a.
Le problème étant que ces clans, peu préoccupés soient-ils par les autres joueurs, ont gardés les failles pour ensuite les exploiter quand le jeu sortira, et ainsi avoir une énorme{ longueur d’avance sur le reste des joueurs. On connait les conséquences que ça a eu sur BF2, qui malgrè ses innombrables patchs, ne ressemble toujours à rien.
C’est l’un des méfait de prendre des habitués, des fanboys comme béta-testeurs.
Solution ?
A vrai dire, je ne vois pas de grosses solutions. L’etranger me parlait l’autre jour de la construction d’une équipe de béta-testeurs professionnels. Des gens qui jouent à toute sorte de jeu, qui ont une gigantesque expérience de jeu, qui sont capables de déceler les plus petites failles pour que les joueurs ne les exploitent pas ensuite.
On peut penser que c’est faisable, c’est même sur le papier, une excellente solution, les testeurs ayant une opinion désintéressée du jeu, à contrario des fanboys, ou même des personnes attirées par le jeu. Ils font leur job, ils sont payés pour. Point final.
Mais ceci requiert une attention des développeurs. Certains dèvs, Kuju, pour prendre un exemple récent, se moque de leur béta-test. Le multi de Dark Messiah a un bon background, peu utilisé dans les FPS ( médiéval ), qui aurait pû donner quelquechose. Bon le problème ici était "principalement" un déséquilibrage énorme des classes, en particulier le Mage, qui pouvait faire des one-shots, en ayant "pas trop besoin" de viser précisément, et ce à une distance faramineuse. Un réel problème donc.
J’ai posté un grand nombre de fois quand la béta était encore active, enfin avec pas plus de 20 joueurs simultanés, dur de dire qu’elle était active, à propos de ce problème. L’etranger l’a fait également, allant même ironiquement jusqu’à proposer de supprimer certaines classes, comme les archers, qui étaient, il faut le reconnaître, impuissants face aux mages et devenaient donc complètement inutiles.
La réponse ?
Elle n’est non pas venue des développeurs comme on l’espérait, ceux-ci n’ayant toujours pas après un mois de béta-test rééquilibré correctement les classes, mais de gros habitués du forum, plus de 1000 posts à leur actif, un clan même ( oui, sur une béta !), qui jouait souvent, en mage bien évidemment. Ces derniers se sont empressés de démentir nos propos, affirmant que les classes étaient parfaitement équilibrées, et allait même jusqu’à troller avec nous ingame à propos de ces posts, énorme mauvaise foi donc.
Résultats : Après un mois de jeu, après un mois d’inactivité quasi-totale de la part des développeurs, j’ai arrété de jouer, lassé de me prendre des boules de feu à tout bout de champ. Je ne sais pas comment à évolué le jeu depuis, il faudrait que je le relance, mais je n’en ai même pas l’envie.
Ceci pour illustrer un double problème, celui des "gros" joueurs qui exploitent les failles autat qu’ils peuvent, et celui des développeurs, qui, plutôt que de rééquilibrer les classes, préfèrent corriger un bug de texture sur un coin de map invisible.
Conclusion
Les béta-tests utiles sont, à mon goût, en voie d’extinction et ce n’est pas les derniers jeux que j’ai eu l’occasion de tester qui m’en dissuaderont. Les joueurs, quand ils postent, et quand ils postent des choses sensées, ne sont pas ou peu écoutés par les développeurs.
L’avenir du béta-test dans son sens le plus propre prend du plomb dans l’aîle depuis bien longtemps, entre les exclus Gamespy/Fileplanet qui ne servent strictement à rien, les joueurs se contentant de tester le jeu puis de le balancer une fois qu’ils en ont marre, et les tests quasi-exclusivement réservés aux anciens clans ou gros fanboys, avec les dérives que l’on connaît.