Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space

Tesi amb menció internacional

Detalles Bibliográficos
Autor: Finocchiaro, Martina
Tipo de recurso: tesis doctoral
Estado:Versión publicada
Fecha de publicación:2023
País:España
Institución:CBUC, CESCA
Repositorio:TDR. Tesis Doctorales en Red
OAI Identifier:oai:www.tdx.cat:10803/689458
Acceso en línea:http://hdl.handle.net/10803/689458
https://dx.doi.org/10.5821/dissertation-2117-398048
Access Level:acceso abierto
Palabra clave:Àrees temàtiques de la UPC::Informàtica
004
id ES_34e7fe9d4768ec500e0d5e9577b005a2
oai_identifier_str oai:www.tdx.cat:10803/689458
network_acronym_str ES
network_name_str España
repository_id_str
dc.title.none.fl_str_mv Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
title Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
spellingShingle Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
Finocchiaro, Martina
Àrees temàtiques de la UPC::Informàtica
004
title_short Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
title_full Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
title_fullStr Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
title_full_unstemmed Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
title_sort Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical space
dc.creator.none.fl_str_mv Finocchiaro, Martina
author Finocchiaro, Martina
author_facet Finocchiaro, Martina
author_role author
dc.contributor.none.fl_str_mv Casals Gelpí, Alicia
Hernansanz Prats, Alberto
Menciassi, Arianna
Ciuti, Gastone
Universitat Politècnica de Catalunya. Departament d'Enginyeria de Sistemes, Automàtica i Informàtica Industrial
dc.subject.none.fl_str_mv Àrees temàtiques de la UPC::Informàtica
004
topic Àrees temàtiques de la UPC::Informàtica
004
description Tesi amb menció internacional
publishDate 2023
dc.date.none.fl_str_mv 2023
2023
2024
dc.type.none.fl_str_mv info:eu-repo/semantics/doctoralThesis
info:eu-repo/semantics/publishedVersion
format doctoralThesis
status_str publishedVersion
dc.identifier.none.fl_str_mv http://hdl.handle.net/10803/689458
https://dx.doi.org/10.5821/dissertation-2117-398048
url http://hdl.handle.net/10803/689458
https://dx.doi.org/10.5821/dissertation-2117-398048
dc.language.none.fl_str_mv Inglés
language_invalid_str_mv Inglés
dc.rights.none.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 194 p.
application/pdf
dc.publisher.none.fl_str_mv Universitat Politècnica de Catalunya
publisher.none.fl_str_mv Universitat Politècnica de Catalunya
dc.source.none.fl_str_mv TDX (Tesis Doctorals en Xarxa)
reponame:TDR. Tesis Doctorales en Red
instname:CBUC, CESCA
instname_str CBUC, CESCA
reponame_str TDR. Tesis Doctorales en Red
collection TDR. Tesis Doctorales en Red
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869405847413587968
spelling Automatic hands-free visualization of a six degrees of freedom agent within a complex anatomical spaceFinocchiaro, MartinaÀrees temàtiques de la UPC::Informàtica004Tesi amb menció internacionalTesi en modalitat de cotutela: Universitat Politècnica de Catalunya i Scuola Superiore Sant'AnnaAl reverso de la portada: ATLAS Marie-Curie Training Network, GA No 813782(English) Over the years, a continuous development of intraluminal procedures resulted in strong benefits for the patients. Reduced blood loss, lower risk of infections, diminished scaring impact and quicker recovery time are among the most valuable ones. However, these improvements imposed high mental and physical stress to the clinicians. In this context, the introduction of robotic technologies has resulted in notable improvements in terms of flexibility of the endoscopes and control stability, by designing multi-steerable snake like robots and endoscopic capsules. Robotic devices also introduced additional degrees of freedom (DOF) to control, as well as sensing information to process, posing the basis for a new framework of human-robot interaction. Therefore, in the context of intraluminal robotic surgery, the present research focuses on the human-robot interaction, aiming at investigating the optimal way to design Human Machine Interface (HMI) with multiple levels of assistance. Accordingly, a modular bio-engineering framework was designed and developed for the analysis, evaluation and comparison of different HMI for robot assisted endoluminal procedure (i.e., colonoscopy). The main component of the framework is a virtual simulator of the robotic colonoscopy procedure, developed using the SOFA. The simulator, endowed with 3D models of colons reconstructed from real patients' CT scans, realistically reproduces the anatomy and its performance during the robotic medical procedure in terms of timings, visual rendering and mechanical behaviour. Its open design allows to measure several metrics correlated with the quality of the procedure (e.g., force exerted on the intestinal walls, timings etc.) and of control (e.g., smoothness of trajectory). Therefore, the different HMI can be used to control the robotic endoscope in the virtual simulator and tested with user studies involving the endoscopists. This framework also comprises the use of wearable sensors to measure the cognitive load of the users through physiological data when testing the HMI in the simulation environment. Finally, a set of questionnaires were designed to be filled by the subjects after the tests for measuring their perceived physical and mental stress, and their overall impression on the interfaces. The framework was tested for the first time by 42 clinicians with the goal of deriving the optimal device for teleoperated control of robotic colonoscopes. To this end, a preliminary survey was driven among 71 endoscopists to derive the main characteristics and configuration of the control device desired by the final users. Accordingly, two selected systems were compared with the framework: an haptic serial-kinematic device and a standard videogame joypad. This users' test represented a first case study for the validation of the framework allowing to compare different HMI and derive their optimal features. Nevertheless, being the framework highly modular and open, is meant to be applied for the testing of different aspects of the HMI, both software and hardware e.g., types of feedback, control strategies etc. Indeed, the final goal of the framework, and more in general of the present thesis, is to extract insights, guidelines and metrics over the design of the next generation intraluminal robotic devices.(Català) Al llarg dels anys, un desenvolupament continu dels procediments intraluminals va donar lloc a grans beneficis per als pacients. La reducció de la pèrdua de sang, el menor risc d'infecció, la disminució de l'impacte espantant i el temps de recuperació més ràpid es troben entre els més valuosos. Tanmateix, aquestes millores van imposar un alt estrès mental i físic als metges. En aquest context, la introducció de les tecnologies robòtiques ha donat com a resultat millores notables pel que fa a la flexibilitat dels endoscopis i l'estabilitat del control, mitjançant el disseny de serps multidireccionables com robots i càpsules endoscòpiques. No obstant això, també va introduir graus de llibertat addicionals (DOF) per controlar, com a informació de detecció a processar, posant la base per a un nou marc d'interacció humà-robot. Per tant, en el context de la cirurgia robòtica intraluminal, la present investigació se centra en la interacció home-robot, amb l'objectiu d'investigar i dissenyar una interfície humà-màquina (HMI) d'autonomia multinivell. En conseqüència, es va dissenyar i desenvolupar un marc de bioenginyeria modular per a l'anàlisi, l'avaluació i la comparació de l'HMI per al procediment endoluminal assistit per robot (és a dir, la colonoscòpia). El component principal del marc és un simulador virtual del procediment de colonoscòpia, desenvolupat mitjançant el SOFA. El simulador, dotat de models 3D de còlons reconstruïts a partir de TAC de pacients reals, reprodueix de manera realista el procediment mèdic en termes de temps, representació visual i comportament mecànic. El seu disseny obert permet mesurar diverses mètriques correlacionades amb la qualitat del procediment (per exemple, força exercida sobre les parets intestinals, temps, etc.) i de control (per exemple, suavitat de la trajectòria). Per tant, les diferents HMI es poden connectar o implementar en el simulador virtual, i provar-se amb estudis d'usuaris que involucren els endoscopistes. El marc també inclou l'ús de sensors portàtils per mesurar la càrrega cognitiva dels usuaris mitjançant dades fisiològiques quan es prova l'HMI en l'entorn de simulació. Finalment, es dissenya un conjunt de qüestionaris per ser administrats als subjectes després de les proves per fer el seguiment de l'estrès físic i mental percebut i la seva impressió global a les interfícies. El marc es va provar per primera vegada amb 42 metges que investigaven el dispositiu òptim per al control teleoperat de colonoscopis robòtics. Amb aquesta finalitat, es va dur a terme una enquesta preliminar entre 71 endoscopistes per derivar les principals característiques i configuració del dispositiu de control desitjat pels usuaris finals. En conseqüència, es van comparar dos sistemes seleccionats amb el marc: un dispositiu cinemàtic en sèrie hàptic i un joypad estàndard de videojocs. Aquesta prova d'usuaris va representar un primer cas pràctic per a la validació del framework que permet comparar diferents HMI i derivar les característiques òptimes. No obstant això, al ser el framework altament modular i obert, està pensat per ser aplicat per a la prova de diferents aspectes de l'HMI, tant de programari com de maquinari, p. tipus de retroalimentació, estratègies de control, etc. De fet, l'objectiu final del marc, i més en general de la present tesi, és extreure coneixements, directrius i mètriques sobre el disseny dels dispositius robòtics intraluminals de nova generació.DOCTORAT EN ENGINYERIA BIOMÈDICA (Pla 2012)Universitat Politècnica de CatalunyaCasals Gelpí, AliciaHernansanz Prats, AlbertoMenciassi, AriannaCiuti, GastoneUniversitat Politècnica de Catalunya. Departament d'Enginyeria de Sistemes, Automàtica i Informàtica Industrial202320242023info:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/publishedVersion194 p.application/pdfhttp://hdl.handle.net/10803/689458https://dx.doi.org/10.5821/dissertation-2117-398048TDX (Tesis Doctorals en Xarxa)reponame:TDR. Tesis Doctorales en Redinstname:CBUC, CESCAInglésADVERTIMENT. Tots els drets reservats. L'accés als continguts d'aquesta tesi doctoral i la seva utilització ha de respectar els drets de la persona autora. Pot ser utilitzada per a consulta o estudi personal, així com en activitats o materials d'investigació i docència en els termes establerts a l'art. 32 del Text Refós de la Llei de Propietat Intel·lectual (RDL 1/1996). Per altres utilitzacions es requereix l'autorització prèvia i expressa de la persona autora. En qualsevol cas, en la utilització dels seus continguts caldrà indicar de forma clara el nom i cognoms de la persona autora i el títol de la tesi doctoral. No s'autoritza la seva reproducció o altres formes d'explotació efectuades amb finalitats de lucre ni la seva comunicació pública des d'un lloc aliè al servei TDX. Tampoc s'autoritza la presentació del seu contingut en una finestra o marc aliè a TDX (framing). Aquesta reserva de drets afecta tant als continguts de la tesi com als seus resums i índexs.info:eu-repo/semantics/openAccessoai:www.tdx.cat:10803/6894582026-06-14T12:46:07Z
score 15,301603