Ne všechny recenze gadgetů jsou vytvořeny rovnocenné | tim bajarin

Jak vědí čtenáři mých sloupů, od začátku jsem se zapojil do odvětví PC. Do Creative Strategies jsem vstoupil v roce 1981 a jedním z mých prvních projektů bylo konzultace s IBM na původním počítači IBM. V roce 1982 Kaypro, Osborne Computer a Compaq porodily trh s PC klony a PC pro podnikání opravdu vzlétly.

Prodejci počítačů o těchto klonech podali mnoho požadavků na výkon a vyzvali je k testování. Bohužel jejich testy byly po celé mapě. Někteří si navzájem odporovali a mezi potenciálními kupci způsobovali velké zmatení.

V polovině osmdesátých let vytvořily klíčové technické publikace jako PC Magazine vlastní laboratoře pro testování požadavků na výrobky a objevily se standardizované testy, jako jsou PC Bench, FutureMark, 3D Bench a Battery Mark. To přineslo určitou přesnost a rozumnost procesu testování, což zase pomohlo lidem přijímat informovanější rozhodnutí o nákupu.

Ale rychle dopředu k dnešnímu dni a testování zařízení v některých rozích webu má divoký prvek divokého západu. Někteří používají extrémní testovací metody, s nimiž se zákazníci pravděpodobně nebudou při každodenním používání setkat.

Během diskuse o „Bendgate“ v iPhone například někteří online nadšenci dali iPhony, chytré telefony Samsung Galaxy a dokonce i BlackBerry do svěráku a zmáčkli je. Poté zveřejnili na sociálních médiích, že se zařízení ohýbá. Jiní takzvaní testeři používali ruce k vyvíjení velmi silného tlaku na každý konec těchto telefonů a tvrdili, že to dokazuje, že smartphony byly ohebné. Ne přesně vědecké testování.

Nyní vidím neprofesionální testery provádějící stírací testy na obrazovkách chytrých telefonů a tabletů, používající věci jako šrámy a žiletky a zveřejňování na sociálních médiích, jako by jejich testy byly evangelium. Bloggové to poté vyzvednou a zveřejní, aniž by hledali vědecké testy na podporu tvrzení.

Loni na jaře uspořádal Corning ve svém závodě v Palo Alto akci a procházel média a analytiky skrz své testovací laboratoře. Ukázalo to vědecký přístup společnosti Corning k testování obrazovek pomocí speciálního vybavení, které emuluje každodenní používání smartphonu. Podle odborníků má řádné vědecké testování nejméně čtyři prvky.

• Přiměřená velikost vzorku. Skutečnost, že můžete něco udělat jednou, může být dobré video, ale je to špatná věda a testování. S smysluplným testováním byste měli být schopni replikovat podmínky a akce a důsledně a opakovaně ukazovat, že určitý jev nejen nastane, ale znovu se objevuje. Kolikrát? To je věc debaty, ale většina by souhlasila s tím, že čím častěji jev nastane, tím spolehlivější jsou testovací data.
• Konzistentní výsledky. Dále, seriózní testování produktů vyžaduje, aby se stejný jev objevil se všemi ostatními faktory stejnými. Stejný produkt. Stejný zdroj. Stejné podmínky. Stejné stresové faktory. Vyzvednutí jednoho produktu z police jeden týden a poté další produkt z jiné police neudělá. Existuje příliš mnoho proměnných, které by mohly ovlivnit výsledek.
• Simulace skutečných situací. Zatřetí, testování by mělo simulovat události v reálném světě. Tabletu nebo telefon nezapálilo příliš mnoho lidí. Lidé také nemají tendenci brát nože X-Acto a škrábat je na obrazovku. Častěji je to telefon v zadní kapse džíny nebo jangling v batohu nebo kabelce. Dobré testování se zaměřuje na replikaci skutečných událostí.
• Vědecká korelace. Nezaměňujte korelaci s příčinnou souvislostí. Je zde otázka příčiny a následku. To není triviální záležitost. Je chvályhodné identifikovat jev. Je však užitečné, pouze pokud vám test umožní pochopit, proč k tomuto jevu došlo.

Kdokoli v těchto dnech může testovat produkt a používat extrémní metody, aby získal jakýkoli výsledek, který chce na základě své zaujatosti. Pokud jsou kupující chytrí, budou hledat testy provedené odborníky, kteří dodržují přísné vědecké pokyny, a tyto testy použijí, aby pomohli učinit informovaná rozhodnutí o nákupu.