Benchmark installé ou benchmark web : quelles différences ?

Les benchmarks se divisent en deux grandes familles : ceux que l'on installe et exécute sur le système d'exploitation, et ceux que l'on lance directement dans le navigateur. Un benchmark installé peut être conçu avec un code proche du matériel pour mesurer des performances proches des limites de l'appareil, et il peut exploiter largement les fonctions du système et les capteurs. En revanche, il faut le télécharger, l'installer et accorder des autorisations, et il faut se procurer un fichier d'installation adapté à chaque appareil. Un benchmark web s'exécute de la même façon sur un PC, un portable, un smartphone ou une tablette dès que l'on ouvre l'adresse, ce qui le rend très accessible. Plutôt qu'une question de supériorité, il est plus juste de voir deux outils qui ont des objectifs différents. Il importe donc moins de dire quelle méthode est la plus précise que de savoir à quelle question chacune répond. Comme un benchmark web ne demande aucune installation et permet d'aligner facilement les conditions de comparaison entre appareils, il est aussi pratique pour vérifier d'un coup les appareils d'une famille ou d'une équipe.

La plus grande différence tient à ce que l'on mesure. Un benchmark installé montre en général le potentiel du matériel lui-même, alors qu'un benchmark web montre les performances après passage par le moteur du navigateur et ses règles de sécurité. De nombreuses tâches ayant migré vers des applications web, les performances dans le navigateur constituent en elles-mêmes l'expérience réelle d'utilisation. Mais avec un même matériel, la valeur varie selon le type et la version du navigateur, les optimisations JavaScript, l'ordonnancement des Worker et la précision des minuteurs. Les scores des deux méthodes n'ont donc ni la même unité ni la même base, et il ne faut ni les convertir l'un en l'autre ni les comparer directement. Plutôt que de dire laquelle a raison ou tort, ce sont des valeurs qui répondent à des questions différentes. Les détails que fournit un benchmark installé et la large accessibilité d'un benchmark web se complètent naturellement.

Comment alors s'en servir ? Pour choisir du matériel ou le régler jusqu'à ses limites, un benchmark installé convient mieux ; pour vérifier rapidement si l'environnement de votre navigateur actuel est confortable, ou pour mesurer un appareil où l'installation est difficile, un benchmark web est plus pratique. La mesure rapide de Web Bench dure environ 30 s, la mesure standard environ 2 à 3 minutes, et les résultats ne sont envoyés au serveur qu’avec votre accord pour le classement. Vous pouvez aussi comparer les 20 derniers résultats pour voir l'évolution avant et après avoir changé un réglage ou de navigateur. Quel que soit l'outil, le principe le plus important est de comparer entre eux le même outil, la même version et les mêmes conditions, et de considérer tous les scores comme des valeurs indicatives. Même si vous utilisez plusieurs outils, ne mélangez pas les scores : prendre l'habitude de lire séparément les informations que fournit chaque outil réduit les malentendus. La carte de résultats peut être enregistrée en PNG, ce qui facilite aussi le partage avec vos proches.