Crunchfish AB (publ) a présenté son dernier outil logiciel pour l'apprentissage profond qui permet d'utiliser des données d'images synthétiques pour générer des annotations sur des images réelles – ; transfert de domaine d'image. Le nouvel outil fait partie d'un système complet de gestion des données d'image qui comprend toutes les étapes, de la création de données d'image synthétique au transfert d'images réelles pour l'apprentissage profond. Une partie cruciale de la plateforme squelette de Crunchfish - permettant le suivi de la main et l'interaction gestuelle - consiste à créer des données d'entraînement pour l'apprentissage profond et les réseaux neuronaux.

Toutes les données d'entraînement doivent être annotées. Avec des millions d'images, l'annotation manuelle est extrêmement chronophage ; c'est pourquoi Crunchfish a développé un outil qui génère automatiquement des images annotées avec une grande précision pour une infime fraction du temps par rapport à l'annotation manuelle. Cela raccourcit radicalement le processus d'annotation fastidieux.

Des données d'image fiables et robustes sont essentielles pour l'apprentissage profond, c'est pourquoi un grand nombre d'images de haute qualité sont nécessaires. Ces données comprennent aussi bien des flux d'images de mains réelles que des données synthétiques. En effectuant un scan photogrammétrique d'une main, un modèle 3D est créé et utilisé pour générer des données d'images synthétiques.

Les objets main de ces données peuvent ensuite être manipulés en ajoutant de l'anatomie animée et en modifiant des tas de paramètres tels que la taille, l'âge, la couleur, les ombres, les effets de lumière, etc. De cette façon, une énorme variété d'images est créée pour garantir une diversité de contenu de données. L'outil de transfert de domaine d'image de Crunchfish génère des données pour l'apprentissage profond dans un nouveau domaine - comme les caméras infrarouges – ; sans aucun travail manuel, en utilisant uniquement des données synthétiques.

Les modifications et l'ajout de nouvelles données d'apprentissage peuvent être effectués en quelques jours plutôt qu'en plusieurs mois, ce qui rend la plateforme polyvalente Crunchfish Skeleton beaucoup plus efficace.