Skip to content
Material Design 2
Main Navigation
v3
v2
v1

Français

English
简体中文
繁體中文
Español
Русский
Português – Brasil
Deutsch
日本語
한국어
Italiano
Polski
Türkçe
čeština
magyar

Français

English
简体中文
繁體中文
Español
Русский
Português – Brasil
Deutsch
日本語
한국어
Italiano
Polski
Türkçe
čeština
magyar

Apparence

Sidebar Navigation

Système Material

Introduction

Études Material

À propos des études Material

Basil

Crane

Fortnightly

Owl

Rally

Reply

Shrine

Fondements Material

Environnement

Surfaces

Élévation

Lumière et ombres

Mise en page

Comprendre la mise en page

Densité de pixels

Grille de mise en page adaptative

Méthodes d'espacement

Comportement des composants

Application de la densité

Navigation

Comprendre la navigation

Transitions de navigation

Recherche

Couleur

Le système de couleurs

Application de la couleur à l'interface utilisateur

Utilisation de la couleur

Lisibilité du texte

Thème sombre

Typographie

Le système typographique

Comprendre la typographie

Prise en charge des langues

Son

À propos du son

Appliquer le son à l'interface utilisateur

Attributs sonores

Chorégraphie du son

Iconographie

Icônes de produit

Icônes système

Icônes animées

Forme

À propos des formes

Forme et hiérarchie

La forme en tant qu'expression

Forme et animation

Appliquer des formes à l'interface utilisateur

Animation

Comprendre l'animation

Le système d'animation

Vitesse

Chorégraphie

Personnalisation

Interaction

Gestes

Sélection

États

Communication

Confirmation et accusé de réception

Formats de données

Visualisation de données

États vides

Aide et commentaires

Visuels

Écran de lancement

Intégration (Onboarding)

États hors ligne

Rédaction

Apprentissage automatique

Modèles de conception pour l'apprentissage automatique

Détection d'objets : caméra en direct

Détection d'objets : image statique

Lecture de codes-barres

Lignes directrices Material

Material Theming

Vue d'ensemble

Mise en œuvre de votre thème

Utilisabilité

Accessibilité

Bidirectionnalité

Lignes directrices par plateforme

Barres Android

Empreinte digitale Android

Retours haptiques Android

Icônes Android

Navigation entre applications sous Android

Notifications sur Android

Autorisations Android

Slices Android

Écran partagé Android

Android : balayer pour actualiser

Barre d'outils de sélection de texte sous Android

Widget Android

Adaptation multiplateforme

Composants

Barres d'application : barre inférieure

Barres d'application : barre d'application supérieure

Backdrop

Bannières

Navigation inférieure

Boutons

Boutons : bouton d'action flottant

Cartes

Cases à cocher

Puces

Tableaux de données

Sélecteurs de date

Boîtes de dialogue

Séparateurs

Listes d'images

Listes

Menus

Tiroir de navigation

Rail de navigation

Indicateurs de progression

Boutons radio

Feuilles inférieures

Panneaux latéraux

Curseurs

Snackbars

Commutateurs

Onglets

Champs de texte

Sélecteurs d'heure

Infobulles

Sur cette page

Détection d'objets : image statique ​

Grâce au machine learning (apprentissage automatique), il est possible de détecter des objets à partir d'une image fournie.

Détection d'objets : image principale de la page « image statique »

Utilisation ​

Les photographies permettent de détecter et d'identifier des objets dans le monde physique grâce à la recherche visuelle, c'est-à-dire une requête de recherche utilisant une image comme entrée. À l'aide de modèles de machine learning, les résultats de la recherche visuelle peuvent fournir aux utilisateurs davantage d'informations sur un élément, qu'il s'agisse d'une espèce de plante ou d'un article à acheter.

Le mode « statique » de l'API ML Kit de détection et de suivi d'objets permet de détecter jusqu'à cinq objets dans une image fournie et d'afficher les résultats correspondants à l'aide de votre propre modèle de classification d'images.

La recherche d'objets dans une image permet aux utilisateurs de parcourir les résultats de plusieurs éléments.

Documentation de l'API ML Kit

Guides de développement pour la détection d'objets

Lien connexe

Exemple – Android

Application de démonstration ML Kit pour Android

Lien connexe

Exemple – iOS

Application de démonstration ML Kit pour iOS

Lien connexe

Principes ​

La conception de cette fonctionnalité repose sur les principes suivants :

Garder les images nettes et lisibles

Alignez les composants de l'interface caméra sur les bords supérieur et inférieur de l'écran, en veillant à ce que le texte et les icônes restent lisibles lorsqu'ils sont placés devant une image.

Tout élément non interactif affiché devant le flux vidéo en direct de la caméra doit être translucide afin de minimiser l'obstruction du champ de la caméra.

La plupart des composants sont placés le long des bords supérieur et inférieur de l'écran pour maximiser la visibilité de l'image
La plupart des composants sont placés le long des bords supérieur et inférieur de l'écran pour maximiser la visibilité de l'image.

Fournir un retour

L'utilisation d'une image pour rechercher des objets introduit des exigences d'utilisation spécifiques : des objets qui se chevauchent ou qui sont partiellement coupés peuvent compliquer leur identification.

Les états d'erreur doivent être communiqués à l'aide de plusieurs signaux visuels (tels que des composants et des animations) et inclure des explications indiquant aux utilisateurs comment améliorer leur recherche.

Les bannières offrent un moyen visible d'informer les utilisateurs qu'un problème est survenu lors de leur recherche
Les bannières offrent un moyen visible d'informer les utilisateurs qu'un problème est survenu lors de leur recherche, avec la possibilité de renvoyer vers une section d'aide pour plus d'informations.

Composants ​

La fonctionnalité de détection d'objets dans une image statique repose sur des composants Material Design existants ainsi que sur de nouveaux éléments spécifiques à l'interaction avec une image. Pour des exemples de code et des démonstrations de ces nouveaux éléments (tels que les marqueurs d'objets), consultez le code source de l'application de démonstration ML Kit Material Design sur Android.

Éléments clés aux différentes étapes d'une expérience de recherche visuelle sur une image statique
Éléments clés aux différentes étapes d'une expérience de recherche visuelle sur une image statique :
1. Barre d'application supérieure
2. Marqueur d'objet
3. Infobulle
4. Cartes
5. Image détectée
6. Feuille inférieure modale
Composants : éléments clés

Barre d'application supérieure ​

La barre d'application supérieure offre un accès permanent aux actions suivantes :

  • Un bouton pour quitter l'expérience de recherche
  • Un bouton bascule pour améliorer la luminosité (en activant le flash de la caméra)
  • Une section d'aide pour résoudre les problèmes de recherche
À faire : utiliser un voile dégradé ou une couleur unie pour le conteneur de la barre d'application supérieure afin de garantir la lisibilité de ses actions sur le flux de la caméra

À faire

Utiliser un voile dégradé ou une couleur unie pour le conteneur de la barre d'application supérieure afin de garantir la lisibilité de ses actions sur le flux de la caméra.

Barre d'application supérieure

La barre d'application supérieure affiche des informations et des actions relatives à la vue actuelle.

Article connexe

Marqueurs d'objets ​

Les marqueurs d'objets sont des indicateurs circulaires et surélevés placés au centre d'un objet détecté. Chaque marqueur est associé à une carte en bas de l'écran, qui affiche un aperçu des résultats de l'objet correspondant. Lorsque la carte devient visible à l'écran, le marqueur d'objet associé augmente en taille.

Appuyer sur un marqueur d'objet (ou sur sa carte de résultats) ouvre une feuille inférieure modale affichant tous les résultats de recherche visuelle de l'objet.

Les marqueurs d'objets s'animent à l'écran au-dessus de l'image afin d'attirer l'attention de l'utilisateur.

Infobulle ​

Les infobulles fournissent aux utilisateurs un texte informatif. Elles peuvent par exemple indiquer un état (« Recherche en cours… ») ou inviter l'utilisateur à passer à l'étape suivante (« Appuyez sur un point ou une carte pour voir les résultats »).

À faire : rédiger des messages courts en utilisant des termes adaptés à votre audience

À faire

Rédiger des messages courts en utilisant des termes adaptés à votre audience.
À ne pas faire : rédiger des infobulles avec des verbes d'action, tels que « Appuyez pour rechercher », car les infobulles ne sont pas interactives

À ne pas faire

Ne pas rédiger d'infobulles avec des verbes d'action, tels que « Appuyez pour rechercher », car les infobulles ne sont pas interactives.

À ne pas faire : placer des messages d'erreur dans une infobulle

À ne pas faire

Ne pas placer de messages d'erreur dans une infobulle. Les erreurs doivent être affichées dans une bannière pour être mieux mises en évidence et pour laisser de l'espace à des actions.

Infobulles

Afficher un texte informatif lorsque les utilisateurs survolent un élément, lui donnent le focus ou appuient dessus

Article connexe

Cartes ​

Les cartes offrent un aperçu des résultats de recherche visuelle associés à un objet. Elles sont disposées dans un carrousel à défilement horizontal, organisé en fonction de la position horizontale de chaque objet.

Chaque carte est associée à un marqueur d'objet. Lorsque la carte devient visible à l'écran, son marqueur d'objet associé augmente en taille. Appuyer sur une carte (ou sur son marqueur d'objet) ouvre une feuille inférieure modale qui affiche tous les résultats de recherche visuelle de l'objet.

Les cartes offrent un aperçu des résultats de recherche visuelle et, lorsqu'on appuie dessus, ouvrent une feuille inférieure modale contenant tous les résultats. Le défilement horizontal des cartes met en évidence le marqueur d'objet correspondant.

Cartes

Regrouper du contenu et des liens sur un même sujet

Article connexe

Feuille inférieure modale ​

Les feuilles inférieures modales donnent accès aux résultats de recherche visuelle. Leur mise en page et leur contenu dépendent du cas d'utilisation de votre application, du nombre de résultats et du niveau de confiance de ces résultats.

Des listes ou des grilles d'images peuvent être utilisées dans une feuille inférieure modale pour afficher plusieurs résultats de recherche visuelle
Des listes ou des grilles d'images peuvent être utilisées dans une feuille inférieure modale pour afficher plusieurs résultats de recherche visuelle. Pour consulter des résultats supplémentaires, la feuille peut être dépliée sur toute la hauteur de l'écran.

Une feuille inférieure modale peut afficher un seul résultat et adapter sa mise en page au contenu
Une feuille inférieure modale peut afficher un seul résultat et adapter sa mise en page au contenu.

Feuilles inférieures

Surfaces contenant du contenu supplémentaire, ancrées au bas de l'écran.

Article connexe

Expérience ​

La recherche visuelle d'objets à partir d'une image comprend trois phases :

  1. Entrée : sélectionner une image à rechercher
  2. Reconnaissance : détecter et identifier des objets
  3. Communication : si des objets correspondants sont trouvés, afficher les résultats

Entrée ​

La recherche visuelle commence lorsqu'un utilisateur sélectionne une image. Pour augmenter les chances de succès, recommandez aux utilisateurs les types d'images les plus adaptés à la recherche.

À faire : fournir une courte explication recommandant des images nettes, avec des objets entièrement visibles et photographiés de près

À faire

Fournir une courte explication recommandant des images nettes, avec des objets entièrement visibles et photographiés de près.
À faire : utiliser les écrans de sélection natifs Android et iOS pour aider les utilisateurs à trouver des photos de façon familière

À faire

Utiliser les écrans de sélection natifs Android et iOS pour aider les utilisateurs à trouver des photos de façon familière.

Reconnaissance ​

Lorsqu'un ou plusieurs objets sont détectés dans une image, l'application doit :

  • Indiquer qu'elle attend les résultats
  • Afficher la progression de la recherche

Les objets détectés par l'API ML Kit de détection et de suivi d'objets sont ensuite comparés à un ensemble d'images connues issues de votre modèle de classification d'images, afin de trouver des résultats correspondants.

Le fait qu'un objet soit détecté dans une photo ne garantit pas que des résultats correspondants seront trouvés. Par conséquent, les objets ne doivent pas être marqués comme détectés tant que des résultats de recherche valides n'ont pas été renvoyés.

À faire : utiliser un indicateur de progression indéterminé et une infobulle pour informer l'utilisateur que l'application analyse l'image afin de trouver des correspondances

À faire

Utiliser un indicateur de progression indéterminé et une infobulle pour informer l'utilisateur que l'application analyse l'image afin de trouver des correspondances. Afficher ces éléments au-dessus de l'image pour montrer la sélection de l'utilisateur et indiquer le début de la recherche.
À ne pas faire : placer des marqueurs d'objets sur les objets détectés tant que les résultats de recherche ne sont pas disponibles

À ne pas faire

Ne pas placer de marqueurs d'objets sur les objets détectés tant que les résultats de recherche ne sont pas disponibles.

Conseils d'ajustement

Les facteurs suivants peuvent influer sur la détection et l'identification des objets (cette liste n'est pas exhaustive) :

  • Qualité d'image médiocre
  • Taille de l'objet trop petite dans l'image
  • Contraste faible entre l'objet et son arrière-plan
  • Objet présenté sous un angle méconnaissable
  • Perte de la connexion réseau nécessaire à la recherche
À faire : utiliser une bannière pour indiquer qu'aucun objet correspondant n'a été identifié

À faire

Utiliser une bannière pour indiquer qu'aucun objet correspondant n'a été identifié. Proposer des options pour consulter une section d'aide dédiée ou réessayer avec une autre image.

Communication ​

Les résultats des objets détectés sont présentés aux utilisateurs de la manière suivante :

  • En plaçant des marqueurs d'objets au centre de chaque objet détecté
  • En affichant un aperçu des résultats de chaque objet sur une carte (dans le cadre d'un carrousel de cartes)

Votre application doit définir un seuil de confiance pour l'affichage des résultats de recherche visuelle. La « confiance » désigne l'évaluation, par un modèle de ML, de la fiabilité d'une prédiction. Pour la recherche visuelle, le niveau de confiance de chaque résultat indique à quel point le modèle estime que le résultat est similaire à l'image fournie.

Si un ou plusieurs objets de l'image ont des résultats de recherche, l'application doit les identifier à l'aide de marqueurs d'objets et d'un carrousel de cartes présentant un aperçu des résultats de chaque objet. Appuyer sur un marqueur ou une carte ouvre une feuille inférieure modale qui affiche les résultats de l'objet.

À faire

Utiliser l'animation pour indiquer la relation entre les points et les cartes. Une animation en cascade attire l'attention sur chaque objet détecté dans l'image et sur son lien avec la carte située en dessous.

À faire

Inclure l'image de l'objet détecté afin de la comparer aux images des résultats de recherche.

Évaluer les résultats de recherche ​

Dans certains cas, les résultats de recherche visuelle peuvent ne pas répondre aux attentes des utilisateurs, comme dans les cas suivants :

Aucun résultat trouvé

Une recherche peut ne renvoyer aucun résultat pour plusieurs raisons, notamment :

  • L'objet ne fait pas partie de l'ensemble d'objets connus, ou ne ressemble à aucun objet connu
  • L'objet a été détecté sous un angle que le modèle de recherche visuelle ne reconnaît pas
  • La qualité d'image est médiocre, ce qui rend les détails clés de l'objet difficiles à reconnaître

Affichez une bannière pour expliquer l'absence de résultats et orientez les utilisateurs vers une section d'aide, où ils trouveront des conseils pour améliorer leur recherche.

Une bannière laisse de la place pour une explication et un lien vers le contenu d'aide si aucun résultat de recherche n'est trouvé
Une bannière laisse de la place pour une explication et un lien vers le contenu d'aide si aucun résultat de recherche n'est trouvé.

Résultats insatisfaisants

Si une recherche renvoie uniquement des résultats dont les scores de confiance sont faibles, vous pouvez inviter l'utilisateur à relancer une recherche, en lui fournissant des conseils pour l'améliorer.

À faire : proposer un lien vers le contenu d'aide lorsque tous les résultats présentent un faible niveau de confiance

À faire

Proposer un lien vers le contenu d'aide lorsque tous les résultats présentent un faible niveau de confiance.

Explicabilité et confiance

Expliquer les prédictions, les recommandations et les autres résultats générés par l'IA

Lien connexe

Thématisation ​

Thème Material Design de Shrine ​

Le parcours d'achat de l'application Shrine permet aux utilisateurs d'effectuer une recherche visuelle de produits à l'aide d'une photo.

L'écran de chargement des résultats utilise un voile rose clair et un indicateur de chargement en forme de losange pour refléter la couleur principale de la marque
L'écran de chargement des résultats utilise un voile rose clair et un indicateur de chargement en forme de losange pour refléter la couleur principale de la marque ainsi que la forme de son logo.
Les styles de couleur et de typographie de Shrine sont appliqués aux résultats de recherche visuelle
Les styles de couleur et de typographie de Shrine sont appliqués aux résultats de recherche visuelle.

Marqueurs d'objets ​

Les marqueurs d'objets de Shrine utilisent une forme de losange pour refléter le style de formes de Shrine (qui repose sur des angles coupés).

Schéma du logo géométrique de Shrine, d'un bouton avec des coins coupés de 4 dp et d'un marqueur d'objet en forme de losange
1. Logo géométrique de Shrine
2. Un bouton avec des coins coupés de 4 dp
3. Un marqueur d'objet en forme de losange

Pour aider les utilisateurs à associer les cartes de résultats aux objets potentiellement détectés, les marqueurs d'objets augmentent généralement en taille lorsque leur carte de résultats correspondante est sélectionnée dans le carrousel. Au lieu de recourir à cette mise en évidence par la taille, Shrine applique des styles de couleur et de bordure personnalisés.

Les marqueurs d'objets peuvent utiliser une différence de taille pour indiquer aux utilisateurs quel objet est lié au résultat
1. Les marqueurs d'objets peuvent utiliser une différence de taille pour indiquer aux utilisateurs quel objet est lié à la carte de résultats qu'ils consultent actuellement.
2. Les marqueurs d'objets de Shrine utilisent des différences de couleur et de style de bordure pour indiquer l'objet actuel. Le conteneur du marqueur passe du #FFFFFF à la couleur On Surface de Shrine (#442C2E) et est doté d'une bordure #FFFFFF de 6 dp.

Cartes ​

Les cartes de résultats de Shrine utilisent des couleurs, une typographie et des formes personnalisées.

Par défaut, les cartes utilisent la police Roboto pour le contenu et #000000 comme couleur On Surface
1. Par défaut, les cartes utilisent la police Roboto pour le contenu, #000000 comme couleur On Surface et des coins arrondis de 4 dp.
2. Les cartes de Shrine utilisent la police Rubik pour le contenu, Shrine Pink 900 (#442C2E) comme couleur On Surface et des coins coupés de 8 dp.

Shrine

Shrine est une marque lifestyle et de mode qui montre comment Material Design peut être utilisé dans le commerce électronique.

Article connexe

Pager
Page précédenteDétection d'objets : caméra en direct
Page suivanteLecture de codes-barres

Publié sous la licence Apache-2.0.

Copyright © 2018-Present Google

https://m2.material.io/design/machine-learning/object-detection-static-image.html

Publié sous la licence Apache-2.0.

Copyright © 2018-Present Google