ComicCast, la app que hace accesible los cómics a personas con discapacidad visual

El proyecto ha sido presentado por Dentsu Creative y ONCE, en colaboración con Amazon Web Services (AWS) como partner tecnológico, e IO Digital X.

La innovadora aplicación, presentada en la Comic-Con de Málaga, utiliza inteligencia artificial para transformar viñetas en relatos sonoros inmersivos.

Dentsu Creative y ONCE, en colaboración con Amazon Web Services (AWS) como partner tecnológico, e IO Digital X como socio de implementación, presentan una aplicación innovadora que abre un nuevo horizonte de accesibilidad cultural y permite a las personas con discapacidad visual vivir la experiencia memorable de “leer” cómics de una forma diferente.

ComicCast ha sido presentada en la San Diego Comic-Con, que se ha celebrado del 25 al 28 de septiembre en Málaga, con una demostración en vivo donde personas ciegas han podido probar en primicia esta tecnología, compartiendo con el público su experiencia. El prototipo se ha entrenado con uno de los cómics más icónicos de la historia de España: Mortadelo y Filemón.

Según Nuria Ibáñez, hija de Francisco Ibáñez, el famoso dibujante y padre de las divertidas
historias de Mortadelo y Filemón, entre otras: “colaborar con un proyecto que permite acercar el universo de los cómics a las personas ciegas es algo que a mi padre le hubiera encantado”.

“En la ONCE celebramos especialmente esta innovación que democratiza el acceso al cómic para las personas con discapacidad visual”, comentaron Cristian Sainz de Marlés, responsable de puesto de trabajo digital y accesibilidad de la ONCE y Marcelo Rosado, director de la ONCE en Málaga, para quienes “no se trata solo de una herramienta tecnológica, es un paso más en la plena inclusión en el ámbito cultural y del entretenimiento, un camino a seguir hacia la igualdad de oportunidades en todos los ámbitos, también en el comic”.

«En Dentsu Creative creemos en el poder transformador de la creatividad como motor que impulsa la tecnología hacia soluciones innovadoras que mejoran la vida de las personas y como parte de la organización de un evento como este queríamos poner nuestro granito de arena», declara María José Vázquez Gómez, directora general creativa en Dentsu Creative España.

Una nueva forma de ver a través de la IA

ComicCast es una aplicación móvil impulsada por la IA de AWS que interpreta, en tiempo real, las páginas de cualquier novela gráfica o cómic físico y lo convierte en audio descriptivo, manteniendo el tono y estilo e incluyendo contexto adicional para conseguir que el usuario entre situación.

A través de la tecnología en la nube, las empresas colaboradoras logran acercar la cultura y riqueza narrativa de un medio que combina imágenes, textos, onomatopeyas y recursos visuales a un público que —hasta ahora— veía limitado el acceso a este tipo de contenido artístico. A pesar de la existencia de soluciones actuales de lectura, como los audiolibros, sistemas de escritura Braille o lectores de pantalla ninguna de estas u otras opciones habían conseguido llegar tan lejos a la hora de reproducir ‘con tanta fidelidad’ los matices fundamentales de las historias, manteniendo la expresión y el tono de los diálogos.

El funcionamiento de ComicCast es muy sencillo: el usuario solo tiene que colocar su dispositivo móvil sobre una página del cómic elegido. A partir de ese momento se activa un proceso de interpretación, en el que la IA de AWS analiza la estructura de la página, identifica las viñetas, extrae los textos, detecta las onomatopeyas y comprende el contexto narrativo.

ComicCast utiliza dos modelos de IA generativa innovadores para hacer posible esta experiencia inmersiva: Amazon Nova Pro y Claude de Anthropic, dentro de Amazon Bedrock, un servicio totalmente administrado de AWS que ofrece una selección de modelos fundacionales (FM) líderes del sector para crear aplicaciones de IA generativas.

Amazon Nova y Claude están enfocados en el análisis visual completo, la comprensión de escenas, el seguimiento de personajes y la generación de descripciones narrativas; y a ellos se añade ElevenLabs, que gestiona la síntesis de voz y mapeo de voces para cada personaje, integrando además los efectos de sonido que enriquecen la experiencia auditiva.

El resultado final es un audio enriquecido que recoge la narración de los diálogos, con una voz y entonación diferente para cada personaje, incorporando efectos sonoros que reproducen onomatopeyas y otros recursos gráficos. En definitiva, un relato fluido y coherente que convierte la lectura visual en una experiencia auditiva inmersiva.

«ComicCast representa un hito en la aplicación práctica de la IA para mejorar la vida de las personas”, destaca Suzana Curic, country lead de AWS para Iberia. “Mediante el uso de nuestra tecnología en la nube, hemos podido crear una solución que no solo hace accesible el contenido, sino que preserva la esencia y la magia de los cómics. Este proyecto demuestra que cuando la tecnología se pone al servicio de la inclusión, podemos crear soluciones verdaderamente innovadoras […]», concluye Curic.