GeneraRX: framework de generación automática de modelos 3D para RV

• Mora García, Pau ^[1] ; Ivorra Martínez, Eugenio ^[1] ; Alcañiz Raya, Mariano Luis ^[1]
  1. [1] Universidad Politécnica de Valencia

     Universidad Politécnica de Valencia

     Valencia, España

     
• Localización: Jornadas de Automática, ISSN-e 3045-4093, Nº. 45, 2024
• Idioma: español
• Títulos paralelos:
  • GeneraRX: framework for automatic generation of 3D models for VR
• Enlaces
  • Texto completo
• Resumen
  • español

    Recientemente, la realidad extendida (RX) ha tomado importancia en diferentes áreas como la educación, la salud, y la industria, aumentando la necesidad de la generación de contenido 3D de calidad personalizado. Sin embargo, esta tecnología presenta un alto nivel de complejidad técnica y grandes costes asociados. Para abordar estos problemas, presentamos GeneraRX, un framework de generación automática de modelos 3D, que busca democratizar esta tecnología implementando Inteligencia Artificial Generativa (IAG) y Modelos de Lenguaje a Gran Escala (LLM). Esta herramienta incluye todos los pasos necesarios para la generación de un objeto 3D y está completamente automatizada. Además, integra métodos del estado del arte como Zero123++ y InstantMesh, así como el novedoso Llama 3. Finalmente, GeneraRX se ha validado mediante un experimento que evalúa la usabilidad a través de un test SUS, demostrando que se ha conseguido simplificar la creación de contenido 3D, permitiendo una interacción más natural para todo tipo de usuarios y eliminando las barreras técnicas.

  • English

    Recently, extended reality (XR) has gained importance in various fields such as education, healthcare, and industry, increasing the need for high-quality, customized 3D content generation. However, this technology presents a high level of technical complexity and significant associated costs. To address this issues, we present GeneraRX, an automatic 3D model generation framework aimed at democratizing this technology by implementing Generative Artificial Intelligence (GAI) and Large Language Models (LLM). This tool implements all the necessary steps for generating a 3D object and is fully automated. Additionally,it integrates state-of-the-art methods such as Zero123++and InstantMesh, as well as the novel Llama 3. Finally, GeneraRX has been validated through an experiment that evaluates usability via a SUS test, demonstrating that it has successfully simplified the creation of 3D content, enabling more natural interaction for all types of users and eliminating technical barriers.