Craig Federighi explique comment l’apprentissage automatique rend possible le scribble sur iPad


Dans une interview avec Popular Mechanics, Craig Federighi, vice-président senior de l’ingénierie logicielle d’Apple, s’est assis pour parler de la naissance de Scribble, la nouvelle fonctionnalité de la société pour l’Apple Pencil et l’iPad dans iPadOS 14.

Quand il s’agissait de comprendre comment les gens écrivaient, Apple avait littéralement des tonnes de gens qui écrivaient physiquement. Cela a permis à l’entreprise de comprendre toutes les variations qui entrent dans la façon dont une personne écrit rapidement, lentement, sous un angle, etc.

«Lorsqu’il s’agit de comprendre les traits (de l’écriture manuscrite), nous recueillons des données. Nous trouvons des gens partout dans le monde et leur faisons écrire des choses», déclare Craig Federighi, vice-président senior du génie logiciel chez Apple. « Nous leur donnons un crayon, et nous leur faisons écrire rapidement, nous leur faisons écrire lentement, écrire en biais. Toute cette variation. » Cette méthodologie est distincte de l’approche relativement simple consistant à scanner et analyser l’écriture manuscrite existante. Federighi dit que pour la technologie d’Apple, les exemples statiques ne suffisaient pas. Ils avaient besoin de voir les traits qui formaient chaque lettre. «Si vous comprenez les traits et comment les traits se sont déroulés, cela peut être utilisé pour clarifier ce qui était écrit.

L’apprentissage automatique d’Apple, qui comprend non seulement ce que vous écrivez mais ce que vous pouvez écrire ensuite, calcule tout sur l’iPad lui-même. Federighi dit que cela est nécessaire pour protéger la confidentialité des utilisateurs et fonctionner à la vitesse dont les gens ont besoin.

Cette compréhension dynamique de la façon dont les gens écrivent signifie que le logiciel d’Apple peut savoir de manière fiable ce que vous écrivez au fur et à mesure que vous l’écrivez, mais combiné avec des données sur la syntaxe d’une langue, l’iPad peut également prédire quel trait, caractère ou mot vous allez écrire ensuite. . La quantité massive de calculs statistiques nécessaires pour ce faire se produit sur l’iPad lui-même, plutôt que dans un centre de données. « Cela doit se produire en temps réel, en ce moment, sur l’appareil que vous tenez », dit Federighi. « Ce qui signifie que la puissance de calcul de l’appareil doit être telle qu’il puisse effectuer ce niveau de traitement localement. »

La fonction Scribble, qui permet aux utilisateurs de convertir l’écriture en texte avec un Apple Pencil, lancée avec iPadOS 14.



Soyez le premier à commenter

Poster un Commentaire

Votre adresse de messagerie ne sera pas publiée.


*