Thomas Mahler, de hoofdontwikkelaar achter de Ori-games en de aankomende titel No Rest for the Wicked, heeft een nieuw score-aggregatieplatform geïntroduceerd genaamd VideoGamesCritic. De site positioneert zich als alternatief voor bestaande diensten zoals Metacritic en OpenCritic door meer nadruk te leggen op spelersmeningen.
Het platform haalt critici-scores rechtstreeks uit OpenCritic en combineert die met gebruikersscores afkomstig van Steam-recensies. Spelersinput krijgt twee derde van de totale weging. Het systeem past extra filters toe, zoals het verminderen van de invloed van recensies van accounts met minder dan twee uur speeltijd en het verhogen van het gewicht voor recensies met meer uren.
Het platform gebruikt ook Steam’s ingebouwde tools voor het detecteren van review-bombing en geeft minder gewicht aan recensies van gebruikers die games via keys hebben geactiveerd. De methode past scores verder aan om veranderingen in games na lancering mee te nemen door recentere recensies zwaarder te laten wegen.
Naast het genereren van gecombineerde scores kent VideoGamesCritic vertrouwensratings toe aan individuele media en makers. Deze ratings meten hoe goed de aanbevelingen van een reviewer overeenkomen met het uiteindelijke spelerssentiment. Voor sites zoals Kotaku die geen numerieke scores geven, zet het platform kwalitatieve oordelen om in een berekende vertrouwensscore op basis van nauwkeurigheid, afstemming en overeenstemming aan spelerszijde.
Mijn grootste probleem met de bestaande aggregators: hun scores vertellen hoe de pers over een game dacht, niet hoe spelers dat deden. Pers blijft meetellen, maar kan de mensen die het spel hebben gekocht niet overstemd.
Mahler heeft eerder gesproken over uitdagingen met Steam-recensies in relatie tot zijn studio Moon en de Early Access-versie van No Rest for the Wicked. De nieuwe site wil ook laten zien hoe games zich ontwikkelen, met als voorbeeld No Man’s Sky, waarvan de initiële Metascore latere verbeteringen niet weergeeft.
De volledige methodologie, inclusief alle weegfactoren, staat op de VideoGamesCritic-website zelf.