VividDreamer: Destilación de Puntajes Invariantes para Generación de Texto a 3D Hiper-Realista

Este documento presenta la Destilación de Puntajes Invariantes (ISD), un método novedoso para la generación de texto a 3D de alta fidelidad. ISD tiene como objetivo abordar los problemas de sobresaturación y sobre-suavizado en el Muestreo de Destilación de Puntajes (SDS). En este documento, SDS se desacopla en una suma ponderada de dos componentes: el término de reconstrucción y el término de guía sin clasificador. Encontramos experimentalmente que la sobresaturación proviene de la gran escala de guía sin clasificador y que el sobre-suavizado proviene del término de reconstrucción. Para superar estos problemas, ISD utiliza un término de puntaje invariante derivado del muestreo DDIM para reemplazar el término de reconstrucción en SDS. Esta operación permite la utilización de una escala media de guía sin clasificador y mitiga los errores relacionados con la reconstrucción, evitando así el sobre-suavizado y la sobresaturación de los resultados. Experimentos extensivos demuestran que nuestro método mejora notablemente SDS y produce objetos 3D realistas a través de optimización de una sola etapa.