GaoDe Maps anuncia el lanzamiento de la tecnología HumanRig y la publicación de código abierto del primer conjunto de datos a gran escala del sector, específicamente diseñado para la vinculación de personajes humanos en 3D. Esta tecnología tiene como objetivo reducir los costes de producción de animaciones de personajes, impulsando la industria de la animación hacia una mayor eficiencia y automatización, convirtiéndose en una infraestructura clave para GaoDe en la creación de experiencias de navegación inmersivas.
El núcleo de la tecnología HumanRig es un algoritmo de vinculación automática. Este algoritmo, mediante un estimador de esqueleto guiado por información previa (Prior-guided Skeleton Estimator, PGSE), utiliza información previa en 2D proyectada en el espacio 3D para inicializar un esqueleto aproximado, reduciendo considerablemente la complejidad de la tarea de vinculación. El algoritmo también emplea un transformador de puntos en forma de U como codificador de malla, eliminando la dependencia de la información de los bordes de la malla 3D y mejorando la robustez de la vinculación en mallas complejas. Además, a través de una red de atención mutua malla-esqueleto (Mesh-Skeleton Mutual Attention Network, MSMAN), se logra una optimización conjunta de la construcción del esqueleto y el skinning.
El conjunto de datos HumanRig contiene 11.434 mallas en pose T que siguen una estructura de esqueleto unificada, abarcando una variedad de tipos de personajes, desde personas reales hasta personajes de dibujos animados e incluso animales antropomórficos. En comparación con los conjuntos de datos existentes, HumanRig presenta ventajas significativas en cuanto a escala, diversidad y consistencia del esqueleto, proporcionando soporte de datos de alta calidad y diversidad para la investigación y aplicación de la vinculación.
Los resultados experimentales muestran que la tecnología HumanRig supera significativamente a los métodos existentes en términos de rendimiento. Esta tecnología no solo llena el vacío de conjuntos de datos de vinculación de figuras humanas a gran escala, sino que también proporciona a la industria de la animación una solución de vinculación automática eficiente. Al simplificar el proceso de vinculación, HumanRig allana el camino para la automatización y la eficiencia de la animación de personajes, abriendo un nuevo capítulo para la expresión creativa y la creación de contenido.
En el futuro, GaoDe Maps planea aplicar la tecnología HumanRig a más escenarios de negocios innovadores, como paquetes de voz IP (incluidos logotipos de vehículos 3D y máscaras dinámicas), avatares 3D personalizados, etc., para mejorar aún más la experiencia del usuario. Simultáneamente, GaoDe continuará explorando la generación inteligente de personajes y soluciones de animación integrales, impulsando el progreso tecnológico en el campo del modelado 3D y la animación de personajes.
El conjunto de datos HumanRig ya está disponible de código abierto. Puede acceder a él a través de los siguientes enlaces:
- Conjunto de datos: https://modelscope.cn/datasets/jellyczd/HumanRig
- Enlace al artículo: https://arxiv.org/abs/2412.02317
- Página principal del proyecto: https://c8241998.github.io/HumanRig/