Pourquoi nous ne nous soucions pas des tests de performances de Galaxy 7

Avez-vous entendu parler du gars qui s’est enthousiasmé pour les performances de référence du processeur non testé dans un environnement non confirmé qui est destiné à un téléphone non annoncé qui ne pourrait pas encore être prêt pour la production et les tests officiels? C'est un vrai coup de genou, vous allez l'adorer.

C'est cette période de l'année, lorsque nous commençons à recevoir cette masse d'informations sur les téléphones dont nous entendrons parler officiellement au cours des deux ou trois prochains mois. Pour des raisons évidentes, le Samsung Galaxy S7 figure en bonne place sur la liste des sujets sur lesquels les gens veulent en savoir plus. Cela conduit à un grand nombre de rapports non confirmés, de fuites de blurrycam et de remous des mains sur ce que tout cela signifie. Au-dessus de tout, nous avons des points de repère, les informations les plus inutiles que nous puissions obtenir sur du matériel inédit avec des processeurs flambant neufs.

La vérité est que la plupart des points de repère sur les smartphones sont inutiles, mais les points de repère non terminés et non officiels précoces le sont encore plus. Voici un aperçu de pourquoi.

Nous sommes encore loin de voir les produits finis

Tous les points de repère que nous verrons apparaître au cours des deux prochaines semaines proviennent de deux endroits différents. Nous voyons soit les cartes de développement Samsung Snapdragon 820 fabriquées par Samsung, soit les prototypes inachevés du Samsung Galaxy S7. Aucune de ces solutions ne vous donnera les résultats escomptés lorsque vous exécuterez les applications d'analyse comparative sur votre unité de vente au détail lorsque vous achèterez le téléphone. Ces chiffres de référence antérieurs à la publication n'ont jamais correspondu aux résultats obtenus par les unités de publication, et ils ne le seront jamais.

Clairs et simples, ces résultats ne vous disent rien.

Les conseils de développeur n'ont souvent pas à prendre en compte le fait qu'ils sont sur batterie ou qu'ils doivent être conscients de facteurs tels que la température. Ces kits sont conçus pour que les développeurs optimisent rapidement leurs logiciels pour les nouvelles architectures de traitement ou les outils logiciels sous-jacents fournis cette année par Qualcomm, notamment pour une meilleure gestion des images dans les caméras ou une meilleure prise en charge audio. Les points de repère sur la carte des développeurs ne vous donnent même pas une idée générale de ce que ces puces sont capables de faire, car souvent, le système d’exploitation qui les exécute n’est souvent pas particulièrement optimisé. Clairs et simples, ces résultats ne vous disent rien.

Les unités de pré-production ne sont pas non plus représentatives de l'expérience du monde réel. Ces versions de téléphones exécutent fréquemment des logiciels inachevés ou manquent d’applications volumineuses telles que des logiciels de sécurité qui ralentissent les téléphones simplement en s’exécutant en arrière-plan. Les repères de prototype sont souvent plus proches de la réalité que les kits de développement, mais restent suffisamment éloignés de l'expérience réelle qu'ils ne valent pas la peine de prendre au sérieux.

En bref, jusqu'à ce que nous voyions des chiffres sur les unités de vente au détail, il suffit de dire non.

Les repères sont souvent manipulés quand même

Au cours des deux dernières années, nous avons constaté que les fabricants d’apps d’applications répètent de plus en plus de ruses dans l’interaction des téléphones avec ces applications d’évaluation de la performance. Nous avons constaté qu'un code spécial n'augmente la vitesse d'horloge du processeur que lorsqu'un test de performance est en cours d'exécution, ce qui donne des chiffres qui sont loin de l'expérience réelle de ces téléphones. Samsung n’est pas un ange ici - et il en va de même pour d’autres - c’est arrivé à plus d’une occasion et pour une raison quelconque, de nombreux utilisateurs ne semblent pas se soucier de rien.

Pourquoi être enthousiasmé par les tests de performance alors qu'il est fréquent que des fabricants écrivent du code pour augmenter leurs chiffres de manière à ne pas refléter l'utilisation réelle sur ces téléphones? Nous savons tous que la plupart des utilisateurs utilisent des tests comparatifs pour concurrencer les autres téléphones, comme si leurs téléphones faisaient l’objet d’une étrange concurrence numérique forte, mais quel est le problème lorsque l’information n’est pas réelle?

Ce qui compte vraiment, c’est la façon dont le téléphone, qu’il s’agisse du Galaxy S7 ou autre, fonctionne lorsque vous êtes en train de faire ce que vous voulez, et si les applications de benchmarking ne peuvent pas le mesurer avec précision, car les fabricants truquent les résultats, nous avons besoin de meilleurs moyens de mesurer les performances dans le monde réel.

Le logiciel que vous installez lorsque vous utilisez le téléphone est important

Voir les points de repère publiés par une autre personne sur son Galaxy S7, même s'il s'agit d'une version commerciale et même s'il n'y a pas de logiciel pour falsifier les résultats, ne vous indiquera toujours pas à quoi ressemblera l'expérience une fois que vous aurez emménagé. à votre propre Galaxy S7. Un téléphone qui vient de sortir de la boîte avec rien mais les applications de stock va fonctionner différemment une fois que vous avez chargé toutes vos applications et commencé à les utiliser. Le cache d'applications, les processus en cours et même l'accès aux données à partir d'un stockage externe auront tous une incidence sur les performances globales de votre téléphone.

Les repères vous montrent à quoi ressemblera la situation lorsque vous essayez de pousser le téléphone à ses limites.

Cela ne signifie pas que les points de repère dans des conditions similaires, mais suffisamment nombreuses, sont totalement sans valeur, cela signifie simplement que vous ne voyez toujours pas la situation dans son ensemble. Et vous ne le ferez pas, car il n’existait aucun moyen, pour les points de repère, de vous donner une bonne idée de la manière dont votre téléphone se comporterait une fois qu’il serait entre vos mains et utilisé par vous. Les points de repère, qu’ils proviennent de périphériques de vente au détail sans logiciel de modification des performances, donnent un aperçu flou du plafond des capacités de performance potentielles. Vous pouvez en quelque sorte voir à quoi ressemblera la situation lorsque vous essayez de pousser le téléphone à l'extrême, ce qui ne se produira vraiment qu'avec des jeux gourmands en ressources ou en vous amusant avec les réglages de l'appareil photo. Vous n'avez pas vraiment l'impression de beaucoup d'autre chose.

Rien de tout cela ne veut dire que vous ne devriez pas vous enthousiasmer pour le Samsung Galaxy S7. Nous avons vu beaucoup de choses impressionnantes de la part de Samsung au cours de la dernière année, et si les rumeurs de trois téléphones se dirigeant vers le monde avec cette marque se révèlent vraies, il y aura encore plus de raisons de prêter attention à la façon dont ces téléphones effectuer afin que vous puissiez mieux déterminer quelle expérience est la pour vous. Cela signifie que les points de repère ne vous offriront pas les informations que vous souhaitez de manière fiable, et que la meilleure chose à faire pour le moment est d'attendre que ces téléphones commencent à se frayer un chemin vers des personnes qui peuvent vous montrer comment elles se comportent. dans le monde réel.