3D Splatting gaussiano (3DGS) eccelle nella ricostruzione fotorealistica della scena
ma lotta con scenari stilizzati (per esempio., cartoni animati, giochi) a causa della frammentazione
trame, disallineamento semantico, e limitata adattabilità all'astratto
estetica. Proponiamo StyleMe3D, una struttura olistica per il trasferimento dello stile 3D GS
che integra il condizionamento di stile multimodale, allineamento semantico multilivello,
e miglioramento della qualità percettiva. I nostri approfondimenti chiave includono: (1) ottimizzando
solo gli attributi RGB preservano l'integrità geometrica durante la stilizzazione; (2)
districare basso-, medio-, e la semantica di alto livello è fondamentale per la coerenza
trasferimento di stile; (3) la scalabilità tra oggetti isolati e scene complesse lo è
essenziale per l’implementazione pratica. StyleMe3D introduce quattro nuovi componenti:
Distillazione del punteggio in stile dinamico (DSSD), sfruttando la latente di Stable Diffusion
spazio per l'allineamento semantico; Descrittore di stile contrastivo (CSD) per localizzato,
trasferimento di texture sensibile al contenuto; Scala simultaneamente ottimizzata (sos) A
disaccoppiare dettagli stilistici e coerenza strutturale; e qualità gaussiana 3D
Valutazione (3DG-QA), un'estetica differenziabile precedentemente addestrata a livello umano
dati per eliminare gli artefatti e migliorare l'armonia visiva. Valutato su NeRF
set di dati sintetici (oggetti) e tanto db (scene) set di dati, StyleMe3D
supera i metodi all'avanguardia nel preservare i dettagli geometrici (per esempio.,
incisioni su sculture) e garantire la coerenza stilistica tra le scene (per esempio.,
illuminazione coerente nei paesaggi), mantenendo il rendering in tempo reale. Questo
il lavoro unisce il 3D GS fotorealistico e la stilizzazione artistica, sbloccaggio
applicazioni nei giochi, mondi virtuali, e arte digitale.

Questo articolo esplora i giri e le loro implicazioni.

Scarica PDF: