Valve kaksi vuotta sitten käyttäjien arvostelujärjestelmä sekä tällaisten arvostelujen vaikutus pelien arvioihin. Tämä tehtiin erityisesti luokituksen "hyökkäykseen" liittyvien ongelmien ratkaisemiseksi. Termi "hyökkäys" viittaa suuren määrän negatiivisten arvostelujen julkaisemiseen pelin luokituksen alentamiseksi.
Kehittäjien mukaan muutosten pitäisi antaa jokaiselle pelaajalle mahdollisuus puhua tietystä pelistä ja sen ostosta. Tämä johtaa lopulta luokitukseen, joka voi kertoa ostajille, pitävätkö he pelistä vai eivät.
Muutosten käyttöönoton jälkeen Valve on yrityksen edustajien mukaan yrittänyt kuunnella sekä pelaajien mielipiteitä että kehittäjien palautetta. Sekä edellinen että jälkimmäinen ovat tietoisia hyödyistä tai haitoista, joita negatiiviset arvostelut voivat aiheuttaa, ja joissakin tilanteissa tätä työkalua käytetään edelleen.
Valve on kehittänyt analytiikkatyökaluja, joiden avulla voit seurata arvosteluja. Saatuaan ja tutkittuaan tiedot ja käyttäjien mielipiteet Valve tuli siihen tulokseen, että he olivat valmiita uusiin muutoksiin.
Suurin muutos on "off-topic" -arviointien seurantajärjestelmän käyttöönotto, jotta ne suljettaisiin pois kokonaisarvioinnista. Tällaisten arvostelujen katsotaan olevan sellaisia, joiden argumentit "eivät vaikuta millään tavalla haluun ostaa tämä tuote". No, koska "oikeita" argumentteja ei ole, tämän tyyppisiä arvosteluja ei oteta huomioon luokituksessa.
Esimerkiksi arvosteluja, jotka liittyvät jollakin tavalla DRM:ään, ei enää oteta huomioon. Toisaalta negatiivisen palautteen syy ilmoitetaan. Se on mitä : "Tarkasti ottaen ne eivät ole osa peliä, vaikka ne häiritsevät joitain pelaajia, joten päätimme, että nämä valitukset eivät kuulu aiheeseen. Mielestämme useimmat Steamin käyttäjät eivät ole kiinnostuneita tällaisista kysymyksistä, joten pelin arvostelu on tarkempi ilman niitä. Lisäksi uskomme, että DRM:stä kiinnostuneet pelaajat ovat usein halukkaita tarkistamaan pelin huolellisesti ennen ostamista, joten päätimme jättää jopa off-topic hyökkäyksiä koskevat arvostelut julkisesti saataville. Heiltä saat selville, onko negatiivisten arvostelujen syy sinulle tärkeä."
Yhtiö ymmärtää, että pelaajat voivat olla kiinnostuneita suhteellisen monista ongelmista, ja "on-topic" ja "off-topic" arvostelujen välillä tulee olemaan hyvin illusorinen raja. Ymmärtääkseen, missä se on hyvä ja missä se on huono, yritys otti käyttöön järjestelmän negatiivisten arvostelujen seurantaan. Se tunnistaa kaiken tyyppisen epätavallisen toiminnan kaikkien Steamin pelien arvosteluissa reaaliajassa. Samaan aikaan järjestelmä "ei yritä selvittää syytä" epätavallisen tilanteen syntymiseen.
Kun tällainen toiminta on tunnistettu, Valven työntekijöille ilmoitetaan asiasta ja he alkavat tutkia ongelmaa. Kehittäjien mukaan järjestelmää on jo testattu toiminnassa tarkistamalla koko Steam-arvosteluhistoria. Tuloksena on, että löydettiin monia syitä, miksi jotain epätavallista tapahtui. Lisäksi ei ollut niin paljon hyökkäyksiä "off-topic"-arvosteluilla.
Kun moderaattoritiimi toteaa, että valvontajärjestelmän havaitsema toiminta liittyy tällaiseen hyökkäykseen, aloitetaan työ "tarkistuspommin" vaikutuksen neutraloimiseksi. Siten hyökkäyksen ajanjakso merkitään muistiin. Tänä aikana tehtyjä arvosteluja ei oteta huomioon laskettaessa pelin luokitusta. No, kukaan ei poista arvosteluja itse, ne pysyvät loukkaamattomina.
Halutessaan käyttäjä voi aina kieltäytyä uudesta järjestelmästä. Kaupan asetuksissa on vaihtoehto, joka, kuten ennenkin, ottaa huomioon kaikki arvostelut pelin luokitusta laadittaessa.
Yksi silmiinpistävimmistä esimerkeistä "arviointihyökkäyksestä" on sen jälkeen, kun Metro Exodus lähti Steamista ja suosii eksklusiivista sijoitusta Epic Games Storeen. Harjoitteluaika on voimassa helmikuuhun 2020 saakka. Pelin tekijöillä oli todennäköisesti vakavia syitä tehdä tämä, mutta pelaajat eivät ymmärtäneet niitä. He alkoivat jättää paitsi negatiivisia arvosteluja myös inhoavat trailereita YouTubessa sekä valituksia ja valituksia aina kun mahdollista.
Yllä oleva kaavio osoittaa selvästi, että tietyn pisteen jälkeen negatiivisten arvioiden määrä kasvoi erittäin voimakkaasti. Tämä hetki merkitsee Metron kolmannen osan lähtöä Steamista. Ja jos ennen "Erittäin positiivisia" arvosteluja oli ylivoimainen enemmistö - yli 80%, niin sen jälkeen kun niitä oli monta kertaa vähemmän, negatiiviset arvostelut alkoivat vallita.
Lähde: will.com