Benchmark: un punteggio prestazioni oggettivo, non tutta la storia

Nel mondo della tecnologia in continua evoluzione, serve un qualche metro di paragone per confrontare le prestazioni, poiché leggere le specifiche tecniche non basta. Ecco perché sono stati creati i benchmark. Ma perché e come li usiamo? Possiamo considerarli affidabili?

• WikiPIT: le risposte alle tue domande
• WikiPIT: Cos'è il notch?

Scorciatoie:

• Cosa significano i benchmark?
• Qual è lo scopo di questi test?
• Prendi i risultati con le pinze

Cosa sono questi benchmark di cui sentiamo spesso parlare?

I benchmark sono programmi progettati per testare CPU, GPU, memorie, o virtualmente qualsiasi altro aspetto di un dispositivo che può essere misurato con un punteggio, tempo, velocità, ecc. Questi sono i test eseguiti da aziende come DxOMark per la valutazione dei tempi di messa a fuoco fotocamera e test di velocità per la velocità di una rete internet, che rientrano anche nella categoria benchmark.

I benchmark possono essere categorizzati in due tipi:

• Benchmark sintetici
• Benchmark real world

Il primo tipo (e più comune) simula un carico di lavoro estremo e mette i componenti in azione al 100% della loro capacità. Questo permette di valutare la potenza massima di un dispositivo.

I benchmark real world simulano carichi di lavoro realistici (anche se ancora molto esigenti) e sono più utili per valutare le vere capacità di un prodotto per scopi più specifici (come le app).

Qual è lo scopo di questi benchmark?

Le app benchmark (o programmi PC) sono progettate per uno scopo specifico: misurare le prestazioni del dispositivo su cui sono eseguite per confrontarle con altri dispositivi di riferimento.

Man mano che la complessità dei dispositivi elettronici aumenta, è sempre più difficile confrontare le loro prestazioni guardando solo le specifiche. Ecco perché nuovi programmi di misurazione prestazioni vengono sempre creati.

Possiamo fidarci di loro?

In teoria, sì. I punteggi calcolati dai benchmark sono sempre ottenuti dalle stesse operazioni su ogni macchina, quindi ogni dispositivo riceve lo stesso trattamento. Quello che devi sapere, però, è lo stato del dispositivo prima di eseguire il test.

Ecco un esempio pratico: se app girano in background su uno smartphone durante il test, il risultato sarà ovviamente diverso rispetto a un secondo smartphone che esegue il programma di test senza altre app aperte. Questo perché alcune risorse del dispositivo testato potrebbero essere in uso da altri programmi o app, che influisce sul risultato finale.

A volte, però, i produttori sono stati colti a barare su questi test benchmark. Più recentemente, OnePlus è stata scoperta ad aumentare le prestazioni dei suoi smartphone quando i benchmark Android più popolari e usati giravano sui loro dispositivi. Riconoscendo l'app in esecuzione, certi produttori possono implementare procedure specifiche per permettere all'hardware di performare meglio e ottenere punteggi più alti. Sapendo come funzionano questi test, puoi ottimizzare il tuo prodotto per ottenere punteggi più alti sui benchmark, ma questo non si traduce sempre in migliori prestazioni nella vita reale.

• Xiaomi Mi 8 è un vero campione, i benchmark lo confermano

Prendi i risultati con le pinze

I benchmark sono solo indicativi e utili se tutti i dispositivi usati per il confronto sono trattati allo stesso modo. Se tutti i test sono eseguiti nelle stesse condizioni, si può valutare quale prodotto è oggettivamente migliore, almeno sulla carta. I benchmark possono essere facilmente truccati, e potrebbero non riflettere l'uso di un dispositivo nella vita reale.

A volte, alcuni smartphone possono ottenere risultati benchmark incredibili, ma fallire nel fornire un'esperienza utente accettabile. Pensa alla gamma Galaxy S di Samsung, che ha il livello hardware più alto, ma a volte non è fluido e reattivo come smartphone con prestazioni inferiori sulla carta, come i Pixel di Google.

• Quanto sono potenti Galaxy S9 e S9+? Scopriamolo

Ti affidi ai benchmark quando scegli i tuoi acquisti tech?