3D Éclaboussures gaussiennes (3DGS) excelle dans la reconstruction de scènes photoréalistes
mais a du mal avec les scénarios stylisés (par ex., dessins animés, jeux) en raison de la fragmentation
textures, désalignement sémantique, et adaptabilité limitée au résumé
esthétique. Nous proposons StyleMe3D, un cadre holistique pour le transfert de style 3D GS
qui intègre un conditionnement de style multimodal, alignement sémantique à plusieurs niveaux,
et amélioration de la qualité perceptuelle. Nos principales informations comprennent: (1) optimisation
seuls les attributs RVB préservent l'intégrité géométrique pendant la stylisation; (2)
démêlage faible-, moyen-, et une sémantique de haut niveau est essentielle pour une cohérence
transfert de style; (3) l'évolutivité sur des objets isolés et des scènes complexes est
essentiel pour un déploiement pratique. StyleMe3D introduit quatre nouveaux composants:
Distillation de partition de style dynamique (DSSD), tirer parti de la capacité latente de Stable Diffusion
espace pour l'alignement sémantique; Descripteur de style contrasté (CDD) pour localisé,
transfert de texture sensible au contenu; Échelle optimisée simultanément (SOS) à
découpler les détails de style et la cohérence structurelle; et qualité gaussienne 3D
Évaluation (3DG-QA), une esthétique différenciable préalablement formée sur des critères humains
données pour supprimer les artefacts et améliorer l’harmonie visuelle. Évalué sur NeRF
ensemble de données synthétiques (objets) et tant de base de données (scènes) ensembles de données, StyleMe3D
surpasse les méthodes de pointe en matière de préservation des détails géométriques (par ex.,
gravures sur sculptures) et assurer la cohérence stylistique entre les scènes (par ex.,
éclairage cohérent dans les paysages), tout en conservant un rendu en temps réel. Ce
le travail fait le pont entre la GS 3D photoréaliste et la stylisation artistique, déverrouillage
applications dans les jeux, mondes virtuels, et art numérique.
Cet article explore les excursions dans le temps et leurs implications.
Télécharger PDF: