Google a ajouté une API appelée Digital Ink Recognition pour la reconnaissance des manuscrits qui peut apparaître dans les applications Android ainsi que sur les iPhones, iPads et iPods Touch. L’outil ne se limite pas au texte fait avec des lettres cursives, mais peut également être utilisé dans des dessins qui sont saisis à l’aide de l’intelligence artificielle.
La technologie présentée est déjà utilisée à l’intérieur du clavier Gboard et qui reconnaît les mots en écrivant tout en lettres cursives même. La reconnaissance numérique de l’encre est différente des API de vision et de langage naturel qui se trouvent dans le kit ML, car elle ne prend pas de texte ou d’images en entrée. Au lieu de cela, il observe les traits de l’utilisateur sur l’écran et reconnaît ce qu’il écrit ou dessine…, commente la note de mise à disposition.
L’idée est d’apporter ces connaissances qui alimentent l’intelligence artificielle dans des applications qui peuvent être développées, ce qui peut également être considéré comme une réponse aux avancées d’Apple avec le lancement de l’iPadOS 14 Scribble with the Apple Pencil.
Du côté de Google, la reconnaissance n’est pas limitée avec certains matériels, comme cela pourrait être le cas avec les stylos S Pen. La technologie comprend à la fois la lettre ou le dessin fait avec un stylet, ainsi que ceux faits avec le doigt. Actuellement, l’API reconnaît déjà plus de 300 langues et 25 styles d’écriture différents… Le français et le français figurent sur cette liste.
Enfin, l’API Google identifie également les emojis qui sont dessinés au milieu des manuscrits, en plus de compléter les dessins comme une pizza, tout cela avec la possibilité de se produire sans aucune connexion Internet ? dans ce cas, l’utilisateur devra télécharger certains modèles, d’une taille moyenne de 20 Mo au total.
