[MWC19 – Analyse] Pourquoi offrir une expérience photo avec l’AI et 3 à 5 caméras

85% des photos prises sont capturées sur un smartphone ! et nècessite une expérience photo avec 3 à 5 caméras et de l'AI
Au démarrage de cette industrie, les capteurs étaient à un niveau zéro mais vous pouviez faire quand même des images 🙂 depuis quelques années les choses ont considérablement changé. Selon les estimations d’InfoTrends en 2017, un total de 1 200 milliards de photos numériques seront prises dans le monde entier cette année, soit environ 160 images pour chacune des quelque 7,5 milliards d’habitants de la planète. Selon les estimations d’InfoTrends, 85% des photos prises sont capturées sur un smartphone !
Selon les estimations d’InfoTrends en 2017, un total de 1 200 milliards de photos numériques seront prises dans le monde entier cette année, soit environ 160 images pour chacune des quelque 7,5 milliards d’habitants de la planète. Selon les estimations d’InfoTrends, 85% des photos prises sont capturées sur un smartphone !
Ci-dessous 4 smartphones présent sur le MWC
Compte tenu de l’importance croissante des performances de l’appareil photo pour les fabricants et les utilisateurs de smartphones, les fabricants ont travaillé dur pour ajouter des fonctionnalités et améliorer la qualité de l’image. Cependant, les utilisateurs veulent également des téléphones minces, ce qui limite considérablement la taille des modules de caméra individuels pouvant être utilisés. L’industrie se réfère à l’épaisseur d’un téléphone en raison de la faible hauteur en Z, ce qui a amené les concepteurs à tirer parti de la largeur et de la hauteur supérieures des téléphones en ajoutant des caméras à leurs conceptions.
Avant
Avant l’introduction et le succès commercial de l’iPhone 7 Plus d’Apple en 2016, le zoom avant sur un smartphone était presque toujours entièrement numérique. À l’origine des Samsung Galaxy S4 et S5 Zoom de Samsung, quelques téléphones spécialisés étaient équipés d’un zoom optique (rendu possible par leur design encombrant), mais la plupart des modèles populaires n’offraient qu’une capacité de zoom numérique de qualité limitée associant le recadrage et la post-capture. redimensionnement.
Après
Au cours des deux dernières années, presque tous les téléphones phares ont adopté une conception à double objectif et capteur pour leur appareil photo arrière, au lieu d’essayer d’ajouter un zoom optique. La plupart des modèles, y compris les modèles Apple, OnePlus, HTC, Xiaomi, Motorola, Nokia et Vivo, utilisent un module d’appareil photo traditionnel couplé à un module de téléobjectif 2x, bien que les Huawei Mate 20 Pro et P20 Pro utilisent un téléobjectif 3x.
Vous retrouverez dans les liens, les tests caméra fait par DxOMark
Wiko (3 caméras)
Deux nouveaux smartphones présentés au MWC 2019 : View3 Pro & View avec leur triple caméra arrière, le View3 Pro. Le capteur Sony IMX486 de 12 MP combiné à un pixel élargi à 1,25μm permettra de réaliser des prises de vue même en faible luminosité.Les selfies même en faible luminosité, avec la caméra avant 16 MP du View3 Pro. Grâce à la technologie Big Pixel, le View3 Pro combine 4 pixels en 1 pour améliorer la capture de la lumière et des détails.
Équilibre des blancs, exposition, ISO, focus…
Samsung (3 caméras)
Le S10+ est livré avec une configuration à trois objectifs dans son appareil photo principal et une configuration à deux objectifs dans son appareil photo avant.L’appareil photo principal 12Mp avec objectif à ouverture variable est associé à un module ultra grand-angle de 16Mp et à un module téléobjectif 2x de 12Mp. Lisez notre revue pour découvrir les performances du nouveau produit phare du fabricant coréen lors de nos tests sur DxOMark Mobile.
Primary: 12Mp sensor with 1.4µm pixels and 26mm-equivalent, f/1.5–2.4 aperture lens, Dual-Pixel AF, OIS
Ultra-wide: 16Mp sensor 1.0µm pixels and 13mm-equivalent, f/2.4-aperture lens
Telephoto: 12Mp sensor with 1.0µm pixels and 52mm-equivalent, f/2.4 aperture lens, PDAF, OIS
2160p/60fps (1080p/30fps at default settings)
Xiaomi (3 Caméras)
Le Xiaomi Mi 9 est le dernier smartphone phare du fabricant chinois et son premier appareil doté d’une configuration à trois caméras. Le module principal capture les informations sur l’image sur un capteur 1/2 ″ 48Mp qui produit des images de sortie 12Mp. En outre, il existe un télé-module 2x 12Mp pour les prises de vue en zoom et un super grand angle de 16Mp avec un champ de vision de 117 degrés.
Primary: 48Mp 1/2-inch Sony IMX586 quad-sensor with 0.8µm pixels, f/1.75-aperture lens, 26mm-equivalent focal length
Tele: 12Mp 1/3.4-inch Samsung S5K3M5 sensor with 1.0µm pixels, f/2.2-aperture lens, 50mm-equivalent focal length
Super-wide-angle: 16Mp 1/3-inch Sony IMX481 sensor, f/2.2-aperture lens, 17mm-equivalent focal length
PDAF/laser autofocus
LED flash
2160p/60fps video (2160p/30fps in default mode)
Meitu (4 caméras)
Son offre de photographie comprend pas moins de quatre caméras, dont deux doubles sur les modules arrière et avant. Pour les amateurs de selfie, la caméra frontale est équipée d’un capteur primaire Sony IMX363 Exmor RS de 13 Mpp couplé à un objectif à ouverture f / 1,8 avec stabilisation d’image et autofocus. Le second capteur de 5 Mpp est utilisé pour la détection de profondeur afin de faciliter les effets de simulation de bokeh en mode Portrait. Il comporte également une «lampe» à flash continu pour fournir un éclairage supplémentaire aux portraits peu éclairés.
13Mp Sony IMX363 Exmor RS sensor
5Mp 2nd sensor for depth sensing
f/1.8-aperture 6p lens with OIS
Autofocus with stills and video
Flash “lamp”
Il est intéressant de noter que Meitu est pionnière dans les expériences de la beauté sur mobile depuis 2008, les applications de Meitu sont utilisées par plus de 450 millions d’utilisateurs actifs par mois dans le monde entier, générant plus de 6 milliards de photos et de vidéos par mois. Les applications de retouche photo et vidéo de Meitu utilisent des algorithmes brevetés de reconnaissance faciale et d’apprentissage automatique pour cartographier les caractéristiques faciales uniques de chaque utilisateur; offrant l’application de maquillage virtuel la plus précise et naturelle et les retouches pour le teint et la structure faciale uniques de chaque utilisateur.
Nokia (5 caméras)
Les cinq caméras ZEISS Optics, 12 MP captent jusqu’à 10 fois plus de lumière qu’un capteur couleur, pour capturer au minimum 60 MP de données – Chaque photo prise avec le Nokia 9 PureView est en HDR. Les cinq appareils photo fonctionnent simultanément pour capturer une même image, puis le Nokia 9 PureView fusionne l’ensemble des résultats avec une plage dynamique pouvant atteindre 12,4 incréments d’ouverture et une carte de profondeur complète de 12 MP. Trois capteurs monochromes f / 1.8 – Nokia a travaillé avec la startup Light.co qui revendique un certain nombre de brevet multi-caméras pour smartphones utilisant des optiques pliées. Il dispose du seul chipset mobile au monde qui est capable de capturer jusqu’à 6 caméras en même temps.
Primary: RGB*2: 12MP, 1.25um, AF, F/1.8, Mono*3: 12MP, 1.25um, AF, F/1.8
Front : 20MP(5MP), 1.0um (2.0um)
Dual tone LED flash
Plus de caméras nécessitent beaucoup plus de puissance de traitement
[La vidéo représentera 90% de l’utilisation des données 5G, mais la VR et l’AR alimentés par la 5G atteindront un point de basculement. D’ici 2028, les jeux – et non les utilisations industrielles – représenteront 90% des données de la 5G.]
L’espace et le coût ne sont pas les seules contraintes sur le nombre de caméras pouvant être intégrées dans un smartphone. La puissance de traitement est également un facteur limitant. Le traitement de plusieurs flux d’images est nettement plus complexe que l’utilisation de captures d’une seule caméra. Non seulement toutes les images doivent être traitées comme elles le seraient normalement, mais un travail supplémentaire est nécessaire pour les aligner correctement, les fusionner de manière à minimiser les artefacts, puis pour effectuer les actions spécialisées nécessaires, telles que la création de bokeh ou cartographie des tons pour faible lumière, pour créer la photo finale à afficher.
Ce travail supplémentaire c’est l’AI qui permet cela ! tous les constructeurs de chipsets, caméras ont présenté leurs plateformes sur le sujet. Le calcul embarqué et les caméras (3D) vont permettre en temps réel d’avoir de nombreuses applications bien au delà du smartphone:
– Dans la santé : Un moyen plus sûr d’éviter le risque de chute à une population vieillissante
– Dans le Retail : Reconnaissance faciale, comptage de personnes, surveillance des stocks, présentation interactive
– Transformez la manière dont les entreprises agricoles et industrielles automatisent l’inspection, la mesure, la préparation de commandes et la pesée
– Dans la robotique : avoir une ision robotique en temps réel pour la cartographie d’intérieur, la localisation, l’évitement d’objets et l’interaction.
– VR/AR : Collecte de données de profondeur sur des objets et des espaces réels afin de reconstruire des modèles numériques en trois dimensions.
…
Orbbec, présente sur le MWC est pionnière sur le sujet en fournissant Oppo (FindX), Alipay, HP, China UnionPay…
Alors que les fabricants de smartphones se font concurrence pour se surpasser avec des capacités photographiques supplémentaires et pour étendre la puissance de leurs appareils photo à de nouveaux domaines tels que l’AR, nous verrons probablement des modules d’appareils photo supplémentaires à l’avant et à l’arrière des appareils futurs. Les avancées logicielles permettent de plus en plus à plusieurs caméras plus petites de faire le travail d’une seule caméra plus grande, et la petite taille et la forme mince des smartphones (et des appareils mobiles en général) rendent nécessaire l’utilisation de petits modules. Source et suite
L’AI
l’intelligence artificielle sera intégrée directement dans le matériel des smartphones via un processeur dédié comme Apple et Huawei ont fait les premiers, ce qui se traduira par la vulgarisation de fonctionnalités telles que la traduction de la parole en temps réel. Nvidia a également des outils qui permet de transformer les photos prises en hiver en scènes estivales magnifiques. Vous avez une photo pluvieuse de votre mariage que vous voulez égayer? L’intelligence artificielle de Nvidia peut donner l’impression que le soleil brillait depuis le début.
le nouveau SoC Exynos 9820 présent dans le Samsung S10 possède son propre NPU (Neural Processing Unit) qui est positionné pour prendre en charge le logiciel de traitement d’images, ce qui nous permet désormais d’obtenir une qualité photographique bien améliorée. Il peut reconnaître jusqu’à 30 sujets différents, en ajustant automatiquement les paramètres de l’appareil photo pour que la prise de vue corresponde toujours à la situation.
Alors, que signifie l’intégration d’une intelligence artificielle intelligente dans les appareils mobiles ? La prolifération de nouvelles applications offre une myriade d’opportunités aux entreprises de toutes formes et de toutes tailles. Naturellement, vous devrez également penser à utiliser des développeurs mobiles qui possèdent une solide connaissance de l’intelligence artificielle et de l’apprentissage automatique.