En ce moment OpenAI ça ne marche pas ChatGPT5, mais se concentre sur le développement d'autres modèles génératifs. Ces jours-ci, la société a présenté Forme, un nouvel outil qui vous permet de créer Modèles 3D à partir de simples chaînes de texte. On ne peut pas s'attendre à des résultats exceptionnels pour l'instant, mais c'est sans doute un premier pas vers une utilisation plus complexe. Voyons tout en détail.
Qu'est-ce que Shap-E comment ça marche
SHAP-E est disponible gratuitement sur GitHub et permet création d'objets tridimensionnels ouvrable sur Paint 3D et convertible en fichiers STL, utilisable également avec des imprimantes 3D. L'Intelligence Artificielle en question repose sur une nouvelle technique de synthèse visuelle appelée Nerf (Neural Radiance Fields) qui a déjà suscité un grand intérêt pour la vision par ordinateur.
Cette nouvelle méthode de synthèse visuelle et de reconstruction 3D peut s'appliquer à divers domaines, dont la robotique (comme on l'a vu récemment avec ChatGPT et le chien Boston Dynamics), la cartographie, la réalité virtuelle et augmentée et bien d'autres.
Dans les cas présentés par OpenAI, Shap-E est capable de générer des objets comme un bol de nourriture, un pingouin, un chien, un vaisseau spatial, mais aussi une chaise et une botte verte. Les modèles peuvent être rendus en quelques secondes, et comme en témoignent de nombreux, SHAP-E pourrait être utilisé pour créer des actifs pour les jeux vidéo, les films et les expériences VR. Il s'agit d'un tournant majeur dans la modélisation et le rendu 3D.
Cependant, l'organisation de Sam Altman n'a pas fourni d'instructions précises sur l'utilisation de l'outil, mais une fois installé avec la commande Python "pip install -e", vous pouvez utiliser l'un des notebooks présents sur GitHub en tant que "text-to-3d", ce qui génère un modèle 3D à partir d'une invite de texte, ou "image-to-3d", qui transforme une image 2D en un objet 3D.
Les résultats ne sont pas excellents, en particulier lorsque vous utilisez des invites de texte : vous générez donc principalement des fichiers PLY monochromes et des GIF animés en couleur peu convaincants. De plus, SHAP-E semble nécessiter beaucoup de ressources système.
