Nextech3D.AI annonce que la société a déposé un brevet provisoire intitulé "Generative AI for 3D Model Creation from 2D Photos using Stable Diffusion with Deformable Template Conditioning" (IA générative pour la création de modèles 3D à partir de photos 2D en utilisant la diffusion stable et le conditionnement de modèles déformables), qui s'appuie sur le précédent brevet déposé l'année dernière pour la création de modèles 3D complexes par pièces. La technologie d'IA révolutionnaire sur laquelle reposent ces brevets place l'entreprise dans une position de leader dans le domaine de la modélisation 3D pour le commerce électronique et prépare le terrain pour que l'entreprise devienne positive en termes de flux de trésorerie. Utilisant les progrès récents de l'IA générative, en particulier les modèles de diffusion, l'invention prescrit une solution pour créer des modèles 3D à partir de photos de référence 2D, soit dans leur ensemble, soit pièce par pièce, en faisant évoluer des modèles différentiables et déformables pour les convertir en pièces 3D, en fonction d'une ou de plusieurs photos de référence de la pièce.

Au fil des ans, Nextech a construit des dizaines de milliers d'actifs 3D de haute qualité, entièrement texturés et photoréalistes, avec des centaines de milliers de pièces individuelles. L'entreprise recueille maintenant ces pièces dans sa bibliothèque de pièces, les rend synthétiquement à partir de vues aléatoires et les utilise pour entraîner de nouveaux modèles de diffusion capables de reconstruire des pièces en maillage 3D à partir de photos de référence. Le premier ensemble de données propres de l'entreprise, comprenant plus de 70 000 objets 3D et plus de 2,2 millions de photos de référence rendues synthétiquement, est maintenant prêt pour l'entraînement.

Il s'agit encore d'une petite partie de toutes les pièces et de tous les actifs de sa bibliothèque de modèles, mais elle est déjà plus importante que le plus grand ensemble de données 3D accessible au public, appelé ShapeNet, avec ses 51 000 modèles de qualité variable. Cette technologie de modélisation 3D révolutionnaire a permis à l'entreprise de générer une accélération significative des revenus et des flux de trésorerie en 2023 et au-delà. Les modèles de diffusion exclusifs de Nextech seront entraînés sur la collection de ces maillages de vérité terrain et de rendus de référence pour recréer les parties de maillage d'origine.

La société travaille sur d'autres modèles d'IA pour prescrire automatiquement des instructions afin d'assembler ces pièces dans des modèles 3D complets.