Une autre application expérimentale de Microsoft Garage, la division de l’entreprise chargée de présenter des projets inhabituels, vient de sortir du four. Appelé fetch !, il est capable d’identifier les races de chiens et de signaler le niveau de similarité de la photo avec la race (il fonctionne même avec les humains !).
La demande a été publiée à temps pour le Meet & de l’American Kennel Club ; le Compete et le Westminster Kennel Club Dog Show, qui rassemblent un grand nombre de chiens de races les plus diverses. Il sera certainement très utile pour les visiteurs et les participants de tester les fonctions de l’application avec les animaux.
Pour tester, il suffit de télécharger l’application Microsoft (exclusive pour iOS) et d’envoyer ou de prendre une photo d’un chien. Peu après, elle informera la race de l’animal, à partir d’une base de données soignée par la propre équipe de Microsoft.
Si la race n’est pas correctement identifiée, la demande indiquera un pourcentage de la race la plus proche. Et si vous l’utilisez avec des personnes, il montrera la race qui vous ressemble le plus, à vous ou à votre ami (avec une explication de la raison pour laquelle il vous a suggéré cette race !) L’opération peut être vue dans la vidéo ci-dessous :
Comme il existe plusieurs races de chiens similaires et de nombreuses options pour qu’un chien non identifié puisse s’intégrer (il peut s’agir d’un mélange, par exemple), il suffit de cliquer sur le pourcentage que le logiciel “Fetch !” vous donnera pour obtenir une liste des cinq principales races qui correspondent le plus à votre chien. Il y a également un historique de toutes les images que vous avez envoyées, y compris les races identifiées.
J’ai testé la version web, qui se limite à deviner la race du chien et à montrer quelques informations, sans calculer un pourcentage de similarité ou quoi que ce soit d’autre. Les résultats ont été à la hauteur des attentes : il a correctement identifié un labrador, a dit que mon bâtard ressemble à un rottweiler (mais il y a peu de ressemblance) et a pensé que mon chat était un… norwich terrier.
Pour plus d’informations sur chaque race dans l’application, il suffit de cliquer sur la flèche dans le coin inférieur droit de l’écran. Les données vous indiquent la taille, le type de pelage et les races qui correspondent le mieux aux différents types de famille. Pour recueillir ces informations, l’équipe de Microsoft a consulté divers experts en la matière afin de remédier aux données, sans se fier aveuglément à des informations toutes faites.
Ce n’est pas la première solution de Microsoft pour salir les images, ni même intelligence artificielle. fetch ! fait partie du projet Oxford, cet ensemble d’API qui utilisent l’intelligence artificielle pour apprendre des tâches liées à la parole, au langage et à la vision. Le projet héberge également des sites comme TwinsOrNot.net, qui identifie la ressemblance de deux personnes et How-Old.net, qui devine l’âge que vous avez.
Il est intéressant de voir comment l’intelligence artificielle et les technologies d’apprentissage machine de Microsoft évoluent rapidement. Mitch Goldberg, directeur du développement chez Microsoft Research, explique comment est née l’idée d'”aller chercher” : “Il y avait un intérêt à créer un cadre qui nous permettrait d’analyser un domaine – dans notre cas, les chiens – et de reconnaître de nombreuses classes, comme les races”, dit-il.
Les experts consultés ont également aidé l’équipe à développer l’image correcte pour identifier les chiens. Ainsi, de la combinaison des algorithmes de l’apprentissage machine et des informations de ces experts, l’application est devenue plus précise au fil du temps.
Selon Goldberg, toutes les races sont difficiles à classer. Pour que l’application apprenne de plus en plus, ils utilisent les réseaux neuronaux profonds, une des technologies les plus avancées de l’apprentissage machine. C’est un système similaire à celui qui a permis à un ordinateur de Google de vaincre un humain dans un jeu de stratégie chinois.
“L’une des choses à faire avec les réseaux neuronaux profonds, c’est de ne pas les entraîner dans une race particulière. Vous mettez plusieurs images, et l’algorithme, dans le processus d’entraînement, détermine ce qui est unique à chaque chien”, explique M. Goldberg.
The fetch ! n’est disponible que pour iOS. Si vous n’utilisez pas l’iPhone, vous pouvez jouer sur une version avec moins de fonctions de l’outil What-Dog.net. Malheureusement, il ne fonctionne pas avec les humains et ne montre pas le pourcentage de similitude avec les photos de chiens, se limitant à montrer la race la plus proche, avec peu d’informations.
