Aujourd'hui, l'équipe Bytedance Seed a lancé un grand modèle généré en 3D - Seed3D 1.0, qui permet la génération de bout en bout d'une image unique à un modèle 3D de simulation de haute qualité.Seed3D 1.0 est basé sur l'architecture innovante de Diffusion Transformer et est complété par un entraînement de données à grande échelle pour générer des modèles 3D complets comprenant une géométrie fine, des textures réelles et des matériaux de rendu physique (PBR).
Les modèles 3D générés via Seed3D 1.0 peuvent être importés de manière transparente dans des moteurs de simulation tels qu'Isaac Sim, et seule une petite quantité de travail d'adaptation est nécessaire pour prendre en charge la formation de grands modèles intelligents et incorporés.
De plus, grâce à la génération de scènes étape par étape, Seed3D 1.0 peut passer de la génération d'un seul objet à la construction de scènes 3D complètes.
Par rapport aux modèles de génération 3D existants, Seed3D 1.0 présente des avantages : ses performances de génération de textures et de matériaux dépassent les précédents modèles open source et fermés, ses performances de génération de géométrie dépassent celles des modèles avec des échelles de paramètres plus grandes dans l'industrie, et ses capacités complètes atteignent le niveau de pointe de l'industrie.
À l'heure actuelle, le rapport technique Seed3D 1.0 a été rendu public et l'API a également été lancée. Vous pouvez visiter la page d'accueil du projet pour voir : la page d'accueil du projet, le portail d'expérience
Seed3D 1.0 utilise Diffusion Transformer, une architecture de modèle largement utilisée dans l'IA générative, pour concevoir des modèles de génération de géométrie 3D et de mappage de texture.
Grâce à une stratégie de génération étape par étape, Seed3D 1.0 peut également être étendu de la génération d'un seul objet à la génération d'une scène 3D complète et cohérente.
Selon les mesures réelles, Seed3D 1.0 a moins de paramètres de génération de géométrie et de meilleurs effets ; les images générées par les matériaux texturés conservent des performances de pointe.
