Published On : 10 août 2017 |Last Updated : 17 mars 2020 |1928 words|8.1 min read|1 Commentaire|

Les photographes ne sont pas des ingénieurs. Nous l’allons montrer tout à l’heure…

Les laboratoires DXO sont un éditeur de logiciels de retouche photo fondés en 2006 près de Paris. Leurs logiciels se spécialisent dans ce qu’on pourrait appeler la retouche corrective d’image, visant à corriger les défauts optiques des appareils photos et objectifs (déformation, perte de netteté, bruit numérique, aberrations chromatiques, etc.). Pour ce faire, ils doivent probablement tester chaque couple boîtier/objectif afin d’en extraire un profil (une sorte de cartographie détaillée des défauts optiques) qu’ils incluent ensuite dans leurs logiciels. En 2008, ils ont commencé à publier sur le site DXOmark.com les résultats de leurs mesures, sous forme d’un classement basé sur des notes « compréhensibles » qui synthétisent leurs profils en 3 paramètres plus une note globale.

Ce classement fait aujourd’hui figure de référence puisqu’il permet de comparer les appareils photos entre eux car les mesures sont répétées de la même manière pour chaque modèle. On est donc bien loin de la subjectivité des tests d’experts, sur le terrain, même si le classement s’opère sur quelques variables techniques et ne suffit pas à préjuger de la valeur absolue d’un appareil photo. Par exemple, l’autofocus n’est pas testé, et les capteurs X-trans de Fuji (dont la structure diffère de la classique matrice de Bayer) ne peuvent être évalués selon leur protocole. Le classement DXO a donc ses limites et sa logique interne, qu’il faut comprendre avant d’utiliser les notes DXO comme des vérités absolues. Tout est expliqué ici, une page que personne n’a pris le temps de lire… Le défaut de tout non-scientifique, et même de certains « scientifiques », est qu’ils s’inclinent devant la scientificité du chiffre, sans chercher à comprendre comment il a été obtenu. Erreur…

La semaine dernière, Brian Smith, prix Pulitzer 1985, publiait sur son blog un article qui vise à comparer la netteté des objectifs Canon, Nikon et Sony, donnant Sony grand gagnant (sa propre marque), et faisant un usage intensif des scores DXO. Article sur lequel je me suis fendu d’un commentaire outré, non approuvé par l’auteur, car il torture les notes DXO pour leur faire dire n’importe quoi… Ceci n’est qu’un énième viol de la technique perpétré par un photographe qui se pique de science, mais ce qui est « grave » ici, c’est que le monsieur sera écouté, du haut des sa glorieuse carrière photographique et de tous ses prix. Pourquoi ai-je pris la mouche ?

Premièrement, il classe les objectifs par ordre de note globale DXO, alors que son article tente d’adresser le problème de la netteté. Or cette note globale tient compte aussi de la perte de luminosité dans l’objectif et de la taille des franges provoquées par les aberrations chromatiques. Donc en gros, ce qu’il compare ici n’est pas la netteté mais la performance générale de l’optique.

Deuxièmement, et c’est plus grave, il n’a rien compris quant à la façon dont la netteté est quantifiée par DXO (pourtant c'est expliqué en Anglais sur leur site). En effet, DXO mesure la Fonction de Transfert de Modulation, autrement dit la réponse en amplitude du système d’imagerie recevant un signal optique discret. Vous n’avez rien compris ? C’est pour cela que DXO exprime ce résultat d’une autre manière : avec un nombre en méga-pixels perceptuels.

Pour comprendre, prenons une image supposée parfaitement nette de 640×428 pixels (scène réelle). Nous formons une image de cette scène sur un capteur de 640×428 pixels. Théoriquement, on aurait une correspondance exacte de pixel à pixel. Mais en pratique, l’objectif disperse la lumière et chaque pixel source est capté par plus d’un pixel du capteur : on observe un flou, modélisé ici pour illustration par un flou gaussien de rayon 2 pixels.

Que se passe-t-il sur le capteur ?

Chaque pixel source devrait correspondre à un seul pixel sur le capteur, mais la dispersion dilate le pixel source sur 5 pixels du capteur (le pixel central et ses 4 voisins en croix) et forme une tâche qui bave sur les pixels voisins. La seule valeur de couleur cohérente avec la réalité se trouve sur le pixel central, ce que captent les pixels situés sur la croix autour n’est que le résidu du pixel central : ces pixels ne servent donc à rien, ce qu’ils captent est l’erreur provoquée par la lentille. En pratique, on a donc 4 pixels incohérents sur le capteur pour chaque pixel source, donc on perd ¾ de la résolution du capteur. Notre image finale a une résolution optique effective équivalent à 160×107 pixels.

C’est cette résolution perceptuelle que quantifie le score DXO pour la netteté (tout est expliqué sur leur site). Mais là vous sentez surgir un problème de taille : la résolution perceptuelle finale dépend :

  • du diamètre de la tâche formée par le pixel source sur le capteur,
  • de la résolution de base du capteur.

Par exemple, l’objectif Canon 50 mm F/1.8 monté sur un Canon 5D Mk II de 22 Mpix affiche une résolution perceptuelle de 14 P-Mpix, soit une perte de 37 % environ. Le même objectif monté sur le Canon 5DS R de 50 Mpix affiche une résolution perceptuelle de 29 P-Mpix, soit une perte de 42 % de sa résolution. Plus on monte en résolution capteur, plus on sauve les meubles de façon absolue, mais le pourcentage de perte de résolution augmente.

Si l’on veut comparer les objectifs, il faut donc les tester sur le même appareil ou au minimum à la même résolution. Or notre bon ami Brian Smith compare des objectifs testés sur :

  • Sony sur Sony a7RII de 42 Mpix sans filtre passe-bas,
  • Canon sur Canon 5DS R de 50 Mpix avec un filtre passe-bas,
  • Nikon sur Nikon D800 E de 36 Mpix sans filtre passe-bas.

Fatalement, en valeur absolue, Sony et Canon écrasent presque systématiquement Nikon puisque leur résolution de base est supérieure. Mais convertissez les résultats en % de perte de résolution et vous chamboulez systématiquement les classements. Par exemple, à 50 mm F/1.4, Smith donne le classement suivant :

  1. Sony FE 50 mm f/1.4 ZA : 41 P-Mpix ⇒ 2 % de perte de résolution
  2. Nikon AF-S NIKKOR 50 mm f/1.4G : 21 P-Mpix ⇒ 42 % de perte
  3. Canon EF 50 mm f/1.2 L USM : 21 P-Mpix ⇒ 58 % de perte
  4. Canon EF 50 mm f/1.4 USM : 22 P-Mpix ⇒ 56 % de perte
  5. Nikon AF-S Nikkor 58 mm f/1.4G : 25 P-Mpix ⇒ 31 % de perte

Du coup le classement n’est plus du tout le même et devient : 1, 5, 2, 4, 3. On montre ici que la résolution démesurée du Canon est largement surfaite, car l’objectif avale plus de la moitié de la résolution à la focale standard, et que, oui, Sony est excellent, mais pas pour les raisons invoquées.

Et ça ne s’arrête pas là ! En effet, la netteté est mesurée par DXO à différents endroits de l’image (centre et bords), à différentes ouvertures. On sait qu’en général, une optique est plus nette au centre et ouverte autour de F/5.6. DXO retient donc l’ouverture où la netteté est maximale, puis la pondère avec la netteté sur les bords et aux autres ouvertures (sans donner ses coefficients de pondération). Concrètement, pour le classement ci-dessus, on obtient les meilleurs scores aux ouvertures suivantes :

  • Sony FE 50 mm f/1.4 ZA : f/2 
  • Nikon AF-S NIKKOR 50 mm f/1.4G : f/1.4 
  • Canon EF 50 mm f/1.2 L USM : f/1.2 
  • Canon EF 50 mm f/1.4 USM : f/1.4 
  • Nikon AF-S Nikkor 58 mm f/1.4G : f/1.4 

Donc lorsque toutes les optiques obtiennent leur meilleurs scores à leur ouverture maximale (qui est en général un des critère de choix pour l’achat), Sony arrache des performances titanesques seulement 1 stop au dessus, à f/2. Est-ce qu’on vient de trouver le secret de leurs performances incroyables ?

Alors voilà, plus on rentre dans le détail des données que l’on analyse, plus on devient perplexe sur ce qu’on essaie de comparer. Les mesures de netteté ne sont pas réalisées à la même ouverture, ni sur le même appareil, ni à la même résolution capteur. En fait, ce que l’on compare, c’est la performance du système optique au complet. Mais là encore, à nuancer… Les objectifs Sony haut de gamme sont fabriqués sous licence par Karl Zeiss, qui fournit aussi des objectifs tierce-partie pour Nikon et Canon. Et peu importe le boîtier derrière, Nikon, Sony ou Canon, les objectifs Zeiss et Sigma Art écrasent toute concurrence de la part de Nikon ou Canon. Ceci permet d’ailleurs de comparer plusieurs boîtiers avec le même objectif Zeiss décliné dans différentes montures, et d’observer que c’est apparemment le capteur (et l’électronique derrière) qui limite la performance de ces optiques exceptionnelles. En effet, avec le même objectif Carl Zeiss Apo Planar T* Otus 85 mm, les pertes de résolution sont :

  • Nikon D800 E/D810 : 3 % (35 P-Mpix)
  • Nikon D750 : 0 % (24 P-Mpix)
  • Nikon D5 : 0 % (20 P-Mpix)
  • Canon 5DS R : 18 % (41 P-Mpix)
  • Canon 5D Mk IV : 13 % (26 P-Mipx)
  • Canon 1Dx : 9 % (17 P-Mpix)

On voit donc que Nikon affiche une perte de résolution proche de 0 %, alors que Canon n’arrive pas à se défaire d’une perte de 9 % minimum, dûe notamment à la présence de filtre passe-bas sur ses capteurs, et ce même sur le 1 Dx dont la résolution n’est que de 18 Mpix. Si des capteurs différents donnent des résultats différents avec la même optique, on se demande ce qu’on peut comparer en faisant varier et le capteur, et l’optique.

On peut accorder un léger avantage de design aux boîtiers sans miroir de Sony : l’objectif est rapproché du capteur, comparé aux réflexs, donc le trajet de la lumière est raccouri ce qui pourrait induire un peu moins de dispersion de la lumière. Pour tout le reste, les limites des tests et leurs approximations permettront encore longtemps aux fanboys d’alimenter leurs querelles de clocher. Et puis, bien sûr, la qualité d’une optique ne se limite pas à sa netteté, et à une époque ou les meilleurs écrans ne dépassent pas 8 Mpix (norme 4 K), il faut rester réaliste.

Bien au delà de la photographie, on illustre ici une tendance générale (répandue aussi chez les fact-checkers) qui consiste à utiliser des données techniques pour appuyer son propos mais sans comprendre ni les tenants ni les aboutissants de ces data qu’on manipule. La première erreur est d’afficher les valeurs de netteté sans leur unité (P-Mpix), alors que cette unité donne un sens sans équivoque aux grandeurs affichées (ce n’est pas un indice arbitraire). Ensuite, en se cachant derrière le chiffre (qu’on pense à tort objectif et « vrai »), on invoque une scientificité de façade qui dissimule le fait que ce chiffre est le résultat d’un calcul sur des valeurs mesurées. Or le protocole expérimental, l’outil de mesure, les hypothèses et les simplifications effectuées lors du calcul, sont subjectives et influent directement le résultat annoncé, qui ne peut pas être traité comme une donnée absolue et reste parfaitement discutable. La statistique ne se limite pas à des comparaisons de nombres, des calculs de maxima et de moyenne, elle s’intéresse aussi à évaluer la validité des données qu’elle manipule. Les nombres ont un sens, et c’est leur méthode d’acquisition qui le détermine. En se contentant du résultat, on fait effectivement dire aux chiffres ce qu’on veut. Et on torture la science.

Commentaires

Les commentaires peuvent utiliser la syntaxe Markdown, le HTML pur, ou les équations LaTeX inline insérées entre $ $ si l’article contient des mathématiques.

  1. Alex 15 mars 2020 à 12 h 25 min - Répondre

    Bonjour,
    Le 5DS R et le D800 E ont le même principe sur le filtre passe-bas, il y en a un mais il est censé être « annulé » par un autre filtre. La perte de résolution sur les Canon n’est pas non plus spécialement dû au filtre passe-bas, la perte du D750 et du D5 est de 0 %, pourtant ils en ont un.
    Personnellement je ne compare sur DxO qu’avec les mesures complètes, sur le piqué il y a des « cartes » colorées, par exemple le 58 f/1.4G est supposé avoir moins de perte que le 50 f/1.4G pourtant sur D800 E à f/1.4 le 50 mm est jaune alors que le 58 mm est plus orange (donc moins bon) et à f/4 le 50 est vert quasiment partout alors que le 58 est encore orange sur les bords mais plus vert au centre donc moins homogène, ce qui veut dire que sur ce point du piqué alors que dans le classement le 58 mm est noté 25 et le 50 mm est noté 21 globalement c’est le 50 mm le plus intéressant.
    Tu aurais pu faire la même chose avec tous ceux qui évoquent le classement DxO sur la dynamique des capteurs pour démontrer que Canon est moins bon, en réalité le classement global se contente d’afficher la dynamique à la plus basse valeur, ce qui favorise déjà un peu certains Nikon qui démarrent à 64 ISO et défavorise ceux qui démarrent à 200ISO comme certains micro &frac43;, et ne montre pas à quel point le classement change quand on monte en ISO.
    Ah et la 4 K, c’est pas 4MP mais 8 ;) . Et oui, il faut rester réaliste, chaque fois que les écrans doublent leur nombre de pixels en large et en long, ils multiplient leur définition totale par 4 ce qui fait qu’un écran 8 K affiche 32MP, ça va vite !

Ce site utilise Akismet pour réduire les indésirables. En savoir plus sur comment les données de vos commentaires sont utilisées.

#Chat Matrix du site

Le chat Matrix du site permet une conversation textuelle interactive entre l’auteur et les lecteurs, sur téléphone ou ordinateur, avec possibilité de conférence vocale et vidéo, en passant par une plateforme opensource décentralisée et respectueuse de votre anonymat (pas de téléphone/email requis). La discussion est bilingue (français / anglais). Scannez le QR code ci-contre ou cliquez ci-dessous :

Rejoignez-nous sur le chat