WAOMBE WACHEZAJI MAONI, NA ALAMA INANYAMAZA

Ukadiriaji wa mtandaoni huongoza kile tunachonunua, programu tunazosakinisha na michezo tunayocheza. Lakini hujengwa kutokana na wateja wachache wanaojisumbua kuandika: watu wengi hawaandiki maoni kuhusu chochote. Suluhisho la kawaida ni kuuliza. Tarehe 30 Oktoba 2019, Valve ilizindua maktaba mpya kwa duka lake la michezo la Steam, ambamo programu iliwauliza wachezaji kama wangependa kuandika maoni kuhusu mchezo waliocheza punde. Katika duka zima, maoni yalipanda kutoka takriban 17,000 kwa siku hadi takriban 70,000.

Je, kuuliza kulifanya ukadiriaji kuwa bora au mbaya zaidi? Nadharia zinatofautiana. Waandishi wengi zaidi wa maoni wanapaswa kumaanisha kelele kidogo. Lakini watu wanaoandika bila kuombwa mara nyingi hufanya hivyo kwa sababu kitu fulani kiliwashangaza — na maoni yaliyoombwa yanaweza kubeba habari hiyo kwa kiasi kidogo zaidi. Na alama zinapojazana karibu na kilele, huenda zikasema machache tu.

Kile ukadiriaji unachojua, na kile unachoonyesha

Zihan Chen na Di Zhu, wa Stevens Institute of Technology, na Lei Nico Zheng, wa University of Massachusetts Boston, waliazima zana iliyotumika kwa muda mrefu kuchunguza maamuzi ya binadamu na vipimo vya utambuzi wa magonjwa: nadharia ya utambuzi wa ishara (signal detection theory). Inatenganisha mambo mawili. Usikivu (sensitivity) ni jinsi mfumo unavyoweza kutofautisha badiliko halisi na kelele ya kawaida — kile ukadiriaji unachojua. Kigezo (criterion) ni kiasi cha ushahidi ambacho mfumo unahitaji kabla ya kuitikia — kile unachoonyesha. Alama inaweza kusogea kidogo kwa sababu inajua kidogo, au kwa sababu kipimo chake kimebanwa kuelekea kilele huku onyesho bado likisubiri mruko uleule.

Kilele kina umuhimu kwa sababu ukadiriaji ni sehemu ya maoni chanya kati ya maoni yote: mabadiliko yaleyale katika uwiano kati ya sifa na malalamiko husogeza alama ya 95% kidogo sana kuliko alama ya 60%.

Kichocheo cha saa tatu

Steam ni jaribio bora kabisa. Kila maoni ya hadharani huonyesha mwandishi wake alikuwa amecheza kwa muda gani alipoyaandika, na ombi la Valve huchochewa na muda wa kucheza. Valve haichapishi kichocheo hicho, kwa hiyo waandishi walikipata katika data: dakika 180. Baada ya uzinduzi, maoni 11,163 yaliandikwa katika dakika 180 kamili za kucheza dhidi ya 2,316 katika dakika 179; kabla yake, dakika hizo mbili zilikuwa na 3,390 na 3,255.

Wakitumia maoni milioni 21.6 ya michezo 315 maarufu, yaliyokusanywa na mkusanyaji huru na kuwekwa mtandaoni, walilinganisha maoni yaliyo juu kidogo na chini kidogo ya saa tatu, kabla na baada ya uzinduzi. Mara tu baada ya saa tatu, maoni yakawa mengi mara 4.25 kuliko chini kidogo ya hapo, na mruko katika sehemu ya maoni chanya uliongezeka kwa pointi 6.6. Maoni yaliyoongezwa ni takriban 96% chanya, dhidi ya 86% chini kidogo ya kiwango hicho, na ni mafupi: 71% yao yana chini ya herufi 50.

Mpangilio unadumu, tahadhari zinafifia

Kwa kuchagua kati ya michezo, mwanzoni ni kidogo tu kilichobadilika. Ukiweka idadi ya maoni kwa kila mchezo kuwa sawa, makubaliano ya alama na wakosoaji yalibaki palepale: uhusiano wa mpangilio (rank correlation) na alama za wakosoaji zilizokusanywa na Metacritic — kipimo cha jinsi mipangilio miwili inavyokubaliana, ambapo 1 inamaanisha mpangilio uleule — ulikuwa 0.42 kabla na 0.41 baada, kwa zaidi ya michezo elfu moja.

Kugundua kwamba mchezo umebadilika ni hadithi nyingine. Waandishi wanatumia maoni yaliyoandikwa katika saa mbili za kwanza za kucheza kama ishara ya marejeo, na wanapima ni kiasi gani cha mwendo wake wa kila mwezi kinachojitokeza katika makundi mengine ya maoni. Juu kidogo ya kiwango hicho, sehemu hiyo ilishuka kutoka 0.73 hadi 0.18; chini kidogo yake, ilishuka tu kutoka 0.81 hadi 0.64. Mvunjiko unaonekana katika saa tatu na katika tarehe ya uzinduzi, na si mahali pengine popote.

Lebo ambazo Steam huonyesha nazo zilinyamaza. Steam hufupisha kila alama kwa lebo ya maneno ambayo madaraja yake huanzia kwenye sehemu zisizobadilika za maoni chanya (95%, 80%, 70%, 40%, 20%). Likikokotolewa kutokana na maoni yaliyoandikwa mara tu baada ya saa tatu pekee, daraja kama hilo lilishuka katika 42% ya miezi mibaya — miezi ambamo maoni ya marejeo kutoka saa mbili za kwanza yalichukua mwelekeo mbaya — kabla ya uzinduzi, na katika 12% tu baada yake; chini kidogo ya kiwango hicho, lilitoka 47% hadi 41%. Katika uundaji upya wa alama ya hadharani ya siku 30, lebo ilishuka katika 38% ya miezi mibaya kabla na 9% baada — huku tahadhari za uongo nazo zikipungua.

Tahadhari chache, si maarifa machache

Hapa dhana hizo mbili zinaachana. Kila maoni yaliyoongezwa huitikia mwezi mbaya takriban nusu ya kiasi cha maoni ya hiari. Lakini ni mengi mno kiasi kwamba, katika wingi uliotazamwa kwa kweli, mkondo ulio juu ya kiwango haukupoteza taarifa yoyote inayoweza kugunduliwa ukilinganishwa na mkondo ulio chini: makubaliano yake na maoni ya marejeo kutoka saa mbili za kwanza yalibadilika kwa −0.03 tu ukilinganisha na mkondo ulio chini, pengo ambalo lingeweza vilevile kuwa sifuri (kipindi cha uhakika cha 95% kutoka −0.13 hadi 0.06). Ukadiriaji unajua karibu kiasi kilekile; unakionyesha kidogo, kwa sababu kipimo kimebanwa na lebo hazijasogea.

Baadhi ya habari mbaya bado hupenya. Kasoro ambazo watengenezaji walizikiri katika matangazo yao wenyewe — kukatika kwa huduma, kurejeshwa kwa matoleo ya awali, kupotea kwa maendeleo ya mchezo — kwa kiasi kikubwa huleta malalamiko, na malalamiko yaliongezeka kidogo kuliko sifa. Katika kasoro hizo, alama ya jumla ilishuka kwa pointi 2.9 baada ya uzinduzi, dhidi ya 1.0 kabla yake.

Waandishi pia walikagua modeli yao katika maombi ya baadaye ya Steam, katika saa 10 na 30, ambayo huongeza maoni machache mno: hapo ilitabiri karibu hakuna mvunjiko, na hakuna uliojitokeza.

Isome alama kwa namna tofauti

Utafiti huu unahusu jukwaa moja, michezo maarufu na data inayoishia Januari 2021, na ombi hilo pamoja na maoni yaliyoongezwa vimekisiwa badala ya kutambulishwa waziwazi. Ushauri wake unahusu kusoma, si kuuliza kidogo: majukwaa yanayoomba maoni yanapaswa kutarajia lebo zisizobadilika kunyamaza, kupima onyesho kwa mara ngapi linanasa matatizo halisi dhidi ya mara ngapi linatoa tahadhari za uongo, na kurekebisha upya. Kanuni za zamani za kukadiria kwa mazoea hazihamishiki — kushuka kwa pointi tano ambako zamani kuliashiria tatizo kumekuwa nadra katika mwezi wowote.