Qu'est-ce qu'une caméra AI et comment fonctionne la retouche photo AI?

L'intelligence artificielle (IA) est partout, et si vous n'avez pas encore de smartphone alimenté par l'IA, vous le ferez probablement bientôt. Même le logiciel de votre téléphone utilise l'IA pour prendre des décisions en votre nom. L'appareil photo Photoshop d'Adobe, qui vient d'être lancé, utilise l'IA pour identifier les objets et les scènes de vos images et suggérer des «lentilles» (effets numériques) pour un impact comique et créatif.

S'agit-il uniquement de l'orgueil du marketing, ou est-ce que l'IA dans un smartphone - et en particulier dans son appareil photo - est quelque chose à laquelle nous devrions tous aspirer? Le terme AI étant de plus en plus utilisé non seulement dans les téléphones avec appareil photo, mais dans toutes sortes d'appareils photo, il est utile de savoir ce que fait réellement l'IA pour vos photos.

L'IA a brouillé les frontières entre la capture d'image, l'amélioration de l'image et la manipulation d'image. Il est utilisé dans l'édition de photos, pour fusionner, améliorer et `` augmenter '' la réalité, pour faire des sélections d'objets plus intelligentes, pour faire correspondre les paramètres de traitement au sujet et pour vous aider à trouver les images automatiquement en fonction du contenu de vos photos plutôt que des mots-clés manuels. et descriptions. Il regarde déjà ce que vous photographiez et prend ses propres décisions sur la façon de le gérer.

Bienvenue dans le nouveau monde courageux des caméras IA.

Qu'est-ce que l'IA?

L'IA est un genre d'informatique qui examine si nous pouvons apprendre à un ordinateur à penser ou, du moins, à apprendre. Il est généralement divisé en sous-ensembles de technologies qui tentent d'imiter ce que font les humains, tels que la reconnaissance vocale, la dictée voix-texte, la reconnaissance d'images et la numérisation faciale, la vision par ordinateur et l'apprentissage automatique.

Il existe tout un tas de mots à la mode autour de ce sujet. «IA», «apprentissage en profondeur», «apprentissage automatique» et «réseaux neutres» sont tous liés dans cette nouvelle branche de la technologie.

Qu'est-ce que cela a à voir avec les caméras? La photographie informatique et la retouche photo rapide, c’est quoi. Et activation vocale.

Caméras à commande vocale

La capacité d'un ordinateur à comprendre la parole humaine est une forme d'IA, et elle s'infiltre dans les caméras depuis quelques années.

Les smartphones proposent Google Now et Siri depuis quelques années, tandis qu'Alexa entre dans les maisons via les haut-parleurs Amazon Echo. Les caméras d'action ont pris ce train en marche ces dernières années, avec les caméras d'action GoPro et même les caméras de tableau de bord capables de prendre des mesures lorsque vous prononcez des phrases simples telles que `` démarrer la vidéo '', `` prendre une photo '', etc.

Tout cela a du sens, en particulier pour les caméras d'action où le fonctionnement mains libres les rend beaucoup plus faciles à utiliser, mais est-ce vraiment de l'IA? Techniquement, c'est le cas, mais jusqu'à récemment, les gadgets à commande vocale étaient simplement appelés «intelligents». Certains vous permettent désormais de dire des choses assez spécifiques telles que "prendre une vidéo au ralenti" ou "prendre une photo en basse lumière", mais une caméra AI doit faire un peu plus que cela pour être digne de ce nom.

Logiciel d'IA

L'intelligence artificielle concerne de nouveaux types de logiciels, initialement pour compenser le manque d'objectifs zoom des smartphones. «Les logiciels deviennent de plus en plus importants pour les smartphones car ils ont un manque physique d'optique, nous avons donc vu la montée en puissance de la photographie computationnelle qui tente de reproduire un zoom optique», déclare l'analyste en imagerie Arun Gill, analyste principal de marché chez Futuresource Consulting . "Les smartphones haut de gamme sont de plus en plus équipés d'appareils photo à double objectif, mais le Google Pixel 3 utilise un seul objectif d'appareil photo avec photographie informatique pour reproduire un zoom optique et ajouter divers effets."

Depuis le Pixel 3, les baies multi-caméras et l'imagerie informatique ont fusionné pour produire une technologie hybride qui reproduit la plupart des effets de profondeur de champ et d'objectif que vous obtenez avec des caméras plus grandes. Un téléphone appareil photo n'est plus «juste» un appareil photo. C'est un appareil de calcul, d'analyse, de `` réflexion '' qui ne capture pas seulement la scène telle qu'elle est, mais comment il pense que vous voulez qu'elle soit, ou comment il pense que vous devriez le vouloir …

L'IA peut être comme avoir un assistant tout-en-un. Après un certain temps, vous pourriez commencer à vous demander qui est réellement responsable.

Le monde n'est pas nécessairement prêt pour toutes les implications des caméras IA. Google a utilisé l'IA sur son appareil photo portable Google Clips, qui a utilisé l'IA pour capturer et ne conserver que des moments particulièrement mémorables. Il utilisait un algorithme qui comprenait les bases de la photographie afin de ne pas perdre de temps à traiter des images qui ne feraient certainement pas la coupe finale d'une bobine de faits saillants. Par exemple, il supprimait automatiquement les photos avec un doigt dans le cadre et les images floues, et favorisait celles qui respectent le concept général de la règle des tiers sur la façon de cadrer une photo.

Effrayant et contrôlant? Certains le pensaient. Quoi qu'il en soit, Google a retiré l'appareil photo en 2022-2023. La question n'est pas de savoir si l'IA est assez puissante pour faire les choses que nous voulons, mais si nous sommes encore prêts à donner autant de pouvoir à une machine… ou à l'entreprise qui possède et exploite les algorithmes d'IA qui le sous-tendent.

Qu'est-ce que la photographie computationnelle?

La photographie numérique est une technique de traitement d'image numérique qui utilise des algorithmes pour remplacer les processus optiques et qui cherche à améliorer la qualité de l'image en utilisant la vision industrielle pour identifier le contenu d'une image.

«Il s'agit de prendre les effets de studio que vous obtenez avec Lightroom et Photoshop et de les rendre accessibles aux utilisateurs en un seul clic», déclare Simon Fitzpatrick, directeur principal de la gestion des produits chez FotoNation, qui fournit une grande partie de la technologie de calcul aux marques d'appareils photo.

«Ainsi, vous pouvez lisser la peau et éliminer les imperfections, mais pas seulement en la brouillant, vous obtenez également de la texture.» Dans le passé, la technologie derrière les modes «peau lisse» et «beauté» consistait essentiellement à brouiller l’image pour masquer les imperfections. «Il s'agit maintenant de créer des looks crédibles, et l'IA joue un rôle clé à cet égard», déclare Fitzpatrick. "Par exemple, nous utilisons l'IA pour former des algorithmes sur les caractéristiques des visages des gens."

Dès le téléphone LG V30S ThinQ, LG utilisait l'IA pour l'imagerie. Il permet à l'utilisateur de sélectionner une image professionnelle sur son application Graphy et d'appliquer la même balance des blancs, la même vitesse d'obturation, l'ouverture et la même sensibilité ISO. LG a également présenté Vision A, un moteur de reconnaissance d'image qui utilise un réseau neuronal formé sur 100 millions d'images, qui recommande comment régler la caméra. Il détecte même les reflets sur l'image, l'angle de prise de vue et la quantité de lumière disponible.

Capteurs de profondeur et arrière-plans flous

Ces dernières années, nous avons vu de nombreux appareils photo de téléphone multi-objectifs utiliser deux objectifs ou plus pour produire des images esthétiquement agréables avec un arrière-plan flou autour du sujet principal. Les gens (et, par conséquent, Instagram) adorent les arrière-plans flous, mais au lieu d'utiliser des appareils photo à double objectif ou de prendre un reflex numérique et de manipuler manuellement la profondeur de champ, l'IA peut maintenant le faire pour vous.

Communément appelé effet `` bokeh '' (en japonais pour flou), l'apprentissage automatique identifie le sujet et brouille le reste de l'image. «Nous pouvons maintenant simuler le bokeh à l'aide d'algorithmes basés sur l'intelligence artificielle qui segmentent les personnes du premier plan et de l'arrière-plan, afin de créer un effet qui commence à ressembler beaucoup à un portrait pris en studio», explique Fitzpatrick. Les derniers smartphones vous permettent de le faire pour les photos prises avec l'appareil photo arrière ou avant (selfie).

«Les gens l'appellent bokeh, mais vous n'obtenez pas le vrai flou que vous obtenez avec un reflex numérique dont vous pouvez modifier la profondeur; avec un téléphone, vous ne pouvez que brouiller l'arrière-plan », explique Gill. "Mais un nombre restreint et croissant de photographes en sont vraiment impressionnés et utilisent un iPhone X pour la capture de tous les jours, et ce n'est que lorsqu'ils effectuent des travaux professionnels qu'ils sortiront leur reflex numérique."

Les caméras AI peuvent automatiquement mélanger des images HDR dans une lumière vive, passer à un mode de capture multi-images dans des conditions de faible éclairage et utiliser la magie de l'imagerie informatique pour créer un effet de zoom continu avec deux modules de caméra ou plus.

Qu'en est-il des reflex numériques et des autres appareils photo «appropriés»?

La suppression automatique des yeux rouges est présente dans les appareils photo reflex numériques depuis des années, tout comme la détection des visages et, dernièrement, la détection des sourires, où un selfie est automatiquement pris lorsque le sujet craque un sourire. Tout cela est de l'IA. Est-ce que Nikon et Canon adopteront un jour une IA plus avancée pour leurs reflex numériques phares? Après tout, il a fallu de nombreuses années pour que le WiFi et le Bluetooth apparaissent sur les reflex numériques.

Pendant que nous attendons, un accessoire «assistant de caméra intelligente» financé par Kickstarter appelé Arsenal veut combler le vide. «Arsenal est un accessoire qui permet le contrôle sans fil d'un appareil photo à objectif interchangeable (par exemple un reflex numérique) à partir d'un appareil mobile, avec des algorithmes d'apprentissage automatique utilisés pour prendre la photo parfaite», déclare Gill. "Ce qu'il fait, c'est comparer la scène actuelle avec des milliers d'images passées, en utilisant la reconnaissance d'image pour reconnaître un sujet spécifique et en appliquant les paramètres appropriés, comme une vitesse d'obturation rapide s'il reconnaît la faune."

Canon, quant à lui, s'est fortement appuyé sur la technologie AI pour le système de mise au point automatique de pointe de l'EOS-1D X Mark III. Ou, pour être plus précis, «apprentissage en profondeur». La complexité des algorithmes est la même (le système est formé à l'aide de photographies professionnelles) mais le deep learning est le résultat final… l'intelligence artificielle est la capacité pour une machine de continuer à apprendre par elle-même.

Cependant, il peut être difficile de séparer la véritable IA de l'automatisation sophistiquée. Depuis des années, les fabricants d'appareils photo compacts proposent différents modes de scène orientés sujet qui peuvent être choisis automatiquement par l'appareil photo. S'agit-il de «l'intelligence» ou simplement d'une mise en œuvre légèrement plus avancée de la mesure de l'exposition, du mouvement du sujet et de la distance de mise au point? Les systèmes de mesure à motifs multiples utilisent généralement une mesure complexe de la distribution de la lumière basée sur des milliers de photos du monde réel et ont utilisé un processus «d'apprentissage en profondeur» avant que le terme ne soit inventé.

À qui s'adresse la photographie IA?

Toutes les personnes. Pour commencer, il s’agit de démocratiser la photographie. «Dans le passé, la photographie était le domaine de ceux qui avaient l'expertise de l'utilisation d'un reflex numérique pour créer différents types d'images, et ce que l'IA a commencé à faire, c'est de rendre les effets et les capacités de la photographie plus avancée disponibles à un plus grand nombre de personnes», déclare Fitzpatrick .

Cela signifie-t-il donc que Photoshop et Lightroom d’Adobe seront bientôt disparus? Absolument pas; L'IA est une technologie complémentaire et rend déjà la retouche photo beaucoup plus automatisée. L’un des partenaires de FotoNation est Athen Tech, dont la technologie basée sur l’IA «Perfectly Clear» effectue des corrections automatiques par lots qui imitent l’œil humain. Un plug-in pour Lightroom, il vise spécifiquement à réduire la durée pendant laquelle les photographes restent assis devant des ordinateurs pour éditer manuellement. "Les photographes professionnels gagnent de l'argent lorsqu'ils prennent des photos, pas lorsqu'ils traitent des images", déclare Fitzpatrick. «L'IA rend les effets créatifs d'aspect professionnel plus accessibles aux utilisateurs de smartphones et aide les photographes professionnels à maximiser leur capacité à gagner leur vie.»

L'IA devient rapidement un terme surutilisé dans le monde de la photographie. À l'heure actuelle, cela s'applique largement aux appareils photo des smartphones, mais les algorithmes incroyables et le niveau de logiciel automatisé que la technologie autorise s'avéreront bientôt irrésistibles pour la plupart d'entre nous. Il n'est peut-être pas encore temps de retirer le reflex numérique, mais l'IA semble prête à changer la façon dont nous prenons des photos.

Non seulement cela, mais il pourrait bientôt prendre en charge l'édition et la conservation de nos bibliothèques de photographies existantes. Ce processus a déjà commencé. Lightroom CC utilise le système de reconnaissance d'objets Sensei basé sur le serveur d'Adobe pour identifier les images par sujet afin que vous n'ayez plus à passer des heures à ajouter manuellement des mots-clés. L'IA est peut-être un terme exagéré et souvent un raccourci pour ce qui n'est rien de plus que le dernier et le plus grand logiciel avancé, mais l'IA promet de faire quelque chose d'incroyable pour les photographes; cela vous fera gagner plus de temps pour que vous puissiez prendre plus de photos et de meilleure qualité.

Pourquoi certains téléphones ont-ils deux caméras d'un côté? Les conceptions de deux caméras expliquées

Skylum Software est l'un des leaders des logiciels de retouche photo basés sur l'IA. Il a introduit AI Sky Replacement dans Luminar pour éliminer tout le masquage manuel nécessaire pour le faire manuellement, AI Augmented Skies pour ajouter des nuages, des planètes, des éclairs et plus encore à vos images, des outils d'amélioration des portraits AI qui peuvent identifier de manière autonome les caractéristiques humaines et la structure de l'IA. pour ajouter de la définition uniquement aux zones d'une image lorsque cela est approprié.

L'utilisation de la réalité augmentée en photographie pourrait pourtant s'avérer controversée. Depuis l'invention des éditeurs d'images, il est possible de déformer, tordre et `` inventer '' la réalité, mais l'IA promet de rendre cela si facile et si convaincant qu'il ne nécessite aucune compétence (ou conscience) particulière.

• Les meilleurs téléphones avec appareil photo que vous pouvez acheter aujourd'hui
• Le meilleur logiciel de retouche photo du moment
• Comment télécharger Photoshop
• Comment télécharger Lightroom

Articles intéressants...