Huis Meningen Benchmarks zijn niet voldoende, maar ervaringen ook niet

Benchmarks zijn niet voldoende, maar ervaringen ook niet

Video: Zelf je thermostaat vervangen van je BMW N20 motor. Preventie onderhoud. F30 F31 F10 F32 F22 (November 2024)

Video: Zelf je thermostaat vervangen van je BMW N20 motor. Preventie onderhoud. F30 F31 F10 F32 F22 (November 2024)
Anonim

BEKIJK ALLE FOTO'S IN GALERIE

SAN FRANCISCO - Een jaar geleden, na het bijwonen van het Intel Developer Forum (IDF) 2012, stelde ik een vraag geïnspireerd door dingen die ik had gehoord van de verschillende presentatoren en PR-mensen tijdens de show: "Hoe benchmark je ervaringen?" Het idee dat mensen zweefden, was dat het echt belangrijk is aan een systeem, hoe goed het functioneert, niet hoe goed het scoort op synthetische prestatietests. Tegenwoordig is er blijkbaar niet veel veranderd.

Sinds ik mezelf deze week opnieuw in de wereld van Intel heb ondergedompeld, merk ik dat ik geconfronteerd word met een voortdurende spervuur ​​van aandringen dat benchmarktests op zijn best en in het slechtste geval misleidend zijn, en dat de focus op het gebruik van het eindproduct het waardevolst is voor consumenten - of op zijn minst wat zou moeten zijn. Eén exemplaar was bijzonder vocaal en ging zelfs zo ver dat de code van enkele belangrijke onderdelen van benchmarkingsoftware werd ontleed (nee, ons werd nooit precies verteld welke) om de redenen te analyseren waarom ze in de eerste plaats niet konden worden vertrouwd.

Vreemd genoeg hebben vertegenwoordigers van Intel tijdens de show keer op keer aangeprezen hoe deze processor zo-en-zo procent sneller is dan die processor, hoe we scores deze keer veel beter zouden moeten zien. En ik werd uitgenodigd voor een evenement op de Intel-campus in Santa Clara, specifiek voor het uitvoeren van tests op het nieuwe Bay Trail-tabletverwerkingsplatform van het bedrijf. Blijkbaar zijn benchmarkresultaten nog steeds af en toe belangrijk.

Op één niveau heeft Intel absoluut gelijk in deze manier van denken. Nee, benchmarkscores vertellen u niet alles over een product, en alleen zullen ze nooit zijn hoe iemand besluit dit apparaat te kopen in plaats van dat ene. Niemand, van technologiebedrijven tot techrecensenten tot techconsumenten, mag uitsluitend op hen vertrouwen, zelfs als ze weten hoe ze deze correct moeten interpreteren.

Maar benchmarkscores zijn nuttig, misschien zelfs van vitaal belang voor het punt waarop vragen over "ervaringen" niet langer relevant zijn. Niet iedereen weet misschien of het resultaat dat ze van een soort activiteit zien, echt goed of gewoon goed is, of dat een bepaald spel erop onredelijk schokkerig lijkt of dat dit gewoon het beste is dat ze kunnen verwachten voor het geld dat ze willen betalen.

Scores van een objectieve - of zelfs een weliswaar niet-objectieve - derde partij vormen het cruciale laatste deel van de kooppuzzel. Als twee tablets video op precies dezelfde manier lijken af ​​te spelen, en dat is waar je om geeft, welke moet je dan kiezen? Als u weet dat u games wilt spelen maar FRAPS niet persoonlijk kent van een frappuccino, ziet u dan geen lijst met vergelijkbare framesnelheden voor u om het beste systeem voor de beste prijs te krijgen?

BEKIJK ALLE FOTO'S IN GALERIE

Uiteindelijk vertellen ervaringen je ook niet alles. Als u zich daarop concentreert, krijgt u, net als bij benchmarks, een onvolledig beeld dat voor meer verwarring dan duidelijkheid kan zorgen. Aandacht besteden aan een afgerond product is om veel redenen logisch, vooral omdat het de redelijk esoterische producten van een bedrijf gemakkelijker maakt voor het bedrijf om te verkopen en voor de consument gemakkelijker te begrijpen.

Terwijl ik in Santa Clara was voor het benchmarkevenement Bay Trail, kreeg ik ook een opwindende blik achter de schermen van Intel's 'User Experience Lab', waar een reeks tests en metingen bestond uit alles van computers tot robots tot een hemi-echoloze kamer, worden ingezet om het nut van de componenten van een systeem te beoordelen. De kwaliteit van audio, de breedte van de kijkhoeken en de gevoeligheid van het touchscreen zijn belangrijke zaken die het dagelijks gebruik beïnvloeden, en na het Lab te hebben gezien, had ik een veel beter begrip van de logica achter de duwervaringen van Intel tegenwoordig.

Wat er in een testlaboratorium gebeurt en wat er in uw woonkamer gebeurt, is natuurlijk niet altijd (of nooit) hetzelfde; veel meer variabelen spelen een rol zodra u het systeem thuis krijgt, en geen enkel bedrijf kan testen voor alles wat u met uw computer kunt doen. De rigoureuze wetenschappelijke toepassingen van Intel zijn een goede plek om te beginnen, maar, zoals het geval is met het testresultaat, vallen mensen bij Intel zo vaak af, geen goede plek om te stoppen.

In een computerlandschap dat elke dag verandert en, nog belangrijker, steeds meer mainstream wordt met elke voorbijgaande generatie, is de overgang van benchmarks naar ervaringen een goed idee. Maar totdat er een herhaalbare manier is om die ervaringen letterlijk te benchmarken, zodat de geïnteresseerde consument niet alleen weet wat ertoe doet, maar ook waarom het ertoe doet en hoe het kan helpen, moeten ervaringen en benchmarks samenwerken om consumenten te helpen de informatie, de antwoorden en de systemen die ze nodig hebben.

BEKIJK ALLE FOTO'S IN GALERIE

Benchmarks zijn niet voldoende, maar ervaringen ook niet