El objetivo del proyecto es abordar de manera holística el proceso de realización de una cirugía oncológica mínimamente invasiva, ya sea laparoscópica o robótica, en la especialidad hepatobiliar cubriendo las fases de planificación y ejecución en la cirugía. Todo el proceso utiliza la reconstrucción 3D de la anatomía del paciente como herramienta de planificación y de guiado quirúrgico.

En la planificación se desarrollan funcionalidades de simulación sobre un software específico. En la ejecución de la cirugía se utilizará realidad aumentada dado que es la principal tendencia tecnológica actual, con resultados prometedores objetivos, pero con importantes retos tecnológicos aún por resolver.

El entregable del proyecto constará por un lado de herramientas software en ambas fases de la cirugía, pero también de procedimientos de operación que definan cómo han de utilizarse para cada uno de los tratamientos quirúrgicos realizados. A efectos metodológicos durante el proyecto se generará un catálogo de procedimientos quirúrgicos y se identificarán los principales retos para su preparación y ejecución.

Se mejorarán herramientas de planificación existentes y se desarrollará una aproximación a la aplicación de la realidad aumentada en el quirófano de manera totalmente personalizada a la patología, anatomía del paciente específico y procedimiento quirúrgico. Para la realidad aumentada se buscará un registro manual de la anatomía virtual sobre la real del paciente, guiado por operador, que aporte valor en el corto plazo durante una cirugía compleja.

Se incluirá un apoyo al registro de delimitación automática de órganos sobre el video de la cirugía en momentos clave de esta basado en soluciones de visión por computador gracias a las aplicaciones de redes neuronales convolucionales. El proyecto supone una aproximación disruptiva a la problemática evitando los análisis fragmentados de cada una de las fases de una cirugía de vías biliares mínimamente invasiva y proporcionando una visión integrada del ciclo de vida quirúrgico donde los hallazgos y decisiones tomadas en la planificación se llevan de forma natural a la ejecución de la cirugía mejorando los resultados de la misma.