Enabling collaborative intelligence in heterogeneous edge to cloud continuum
Tesi amb menció de Doctorat Internacional i de Doctorat Industrial
| Autor: | |
|---|---|
| Tipo de recurso: | tesis doctoral |
| Fecha de publicación: | 2025 |
| País: | España |
| Institución: | Universitat Politècnica de Catalunya (UPC) |
| Repositorio: | UPCommons. Portal del coneixement obert de la UPC |
| Idioma: | inglés |
| OAI Identifier: | oai:upcommons.upc.edu:2117/449590 |
| Acceso en línea: | https://hdl.handle.net/2117/449590 https://dx.doi.org/10.5821/dissertation-2117-449590 |
| Access Level: | acceso embargado |
| Palabra clave: | Edge-to-Cloud Continuum Multi-access Edge Computing (MEC) Network Function Virtualization (NFV) AI-driven orchestration Deep Reinforcement Learning (DRL) Multi-agent systems Fairness-aware scheduling Resource allocation Industrial automation Multi-AGV coordination Distributed intelligence Scalability and adaptability. 621.3 - Enginyeria elèctrica. Electrotècnia. Telecomunicacions Àrees temàtiques de la UPC::Enginyeria de la telecomunicació |
| id |
ES_89f7e0fbddae3f664b65e9e2ed7857db |
|---|---|
| oai_identifier_str |
oai:upcommons.upc.edu:2117/449590 |
| network_acronym_str |
ES |
| network_name_str |
España |
| repository_id_str |
|
| dc.title.none.fl_str_mv |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| title |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| spellingShingle |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum Palomares Torrecilla, Javier|||0009-0003-6523-4887 Edge-to-Cloud Continuum Multi-access Edge Computing (MEC) Network Function Virtualization (NFV) AI-driven orchestration Deep Reinforcement Learning (DRL) Multi-agent systems Fairness-aware scheduling Resource allocation Industrial automation Multi-AGV coordination Distributed intelligence Scalability and adaptability. 621.3 - Enginyeria elèctrica. Electrotècnia. Telecomunicacions Àrees temàtiques de la UPC::Enginyeria de la telecomunicació |
| title_short |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| title_full |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| title_fullStr |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| title_full_unstemmed |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| title_sort |
Enabling collaborative intelligence in heterogeneous edge to cloud continuum |
| dc.creator.none.fl_str_mv |
Palomares Torrecilla, Javier|||0009-0003-6523-4887 |
| author |
Palomares Torrecilla, Javier|||0009-0003-6523-4887 |
| author_facet |
Palomares Torrecilla, Javier|||0009-0003-6523-4887 |
| author_role |
author |
| dc.subject.none.fl_str_mv |
Edge-to-Cloud Continuum Multi-access Edge Computing (MEC) Network Function Virtualization (NFV) AI-driven orchestration Deep Reinforcement Learning (DRL) Multi-agent systems Fairness-aware scheduling Resource allocation Industrial automation Multi-AGV coordination Distributed intelligence Scalability and adaptability. 621.3 - Enginyeria elèctrica. Electrotècnia. Telecomunicacions Àrees temàtiques de la UPC::Enginyeria de la telecomunicació |
| topic |
Edge-to-Cloud Continuum Multi-access Edge Computing (MEC) Network Function Virtualization (NFV) AI-driven orchestration Deep Reinforcement Learning (DRL) Multi-agent systems Fairness-aware scheduling Resource allocation Industrial automation Multi-AGV coordination Distributed intelligence Scalability and adaptability. 621.3 - Enginyeria elèctrica. Electrotècnia. Telecomunicacions Àrees temàtiques de la UPC::Enginyeria de la telecomunicació |
| description |
Tesi amb menció de Doctorat Internacional i de Doctorat Industrial |
| publishDate |
2025 |
| dc.date.none.fl_str_mv |
2025 2025-11-25 2025 2025-12-23 2026 2026-08-11 |
| dc.type.none.fl_str_mv |
doctoral thesis http://purl.org/coar/resource_type/c_db06 VoR http://purl.org/coar/version/c_970fb48d4fbd8a85 |
| dc.type.openaire.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
| format |
doctoralThesis |
| dc.identifier.none.fl_str_mv |
https://hdl.handle.net/2117/449590 https://dx.doi.org/10.5821/dissertation-2117-449590 |
| url |
https://hdl.handle.net/2117/449590 https://dx.doi.org/10.5821/dissertation-2117-449590 |
| dc.language.none.fl_str_mv |
Inglés eng |
| language_invalid_str_mv |
Inglés |
| language |
eng |
| dc.rights.none.fl_str_mv |
embargoed access http://purl.org/coar/access_right/c_f1cf |
| dc.rights.openaire.fl_str_mv |
info:eu-repo/semantics/embargoedAccess |
| rights_invalid_str_mv |
embargoed access http://purl.org/coar/access_right/c_f1cf |
| eu_rights_str_mv |
embargoedAccess |
| dc.format.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universitat Politècnica de Catalunya |
| publisher.none.fl_str_mv |
Universitat Politècnica de Catalunya |
| dc.source.none.fl_str_mv |
reponame:UPCommons. Portal del coneixement obert de la UPC instname:Universitat Politècnica de Catalunya (UPC) |
| instname_str |
Universitat Politècnica de Catalunya (UPC) |
| reponame_str |
UPCommons. Portal del coneixement obert de la UPC |
| collection |
UPCommons. Portal del coneixement obert de la UPC |
| repository.name.fl_str_mv |
|
| repository.mail.fl_str_mv |
|
| _version_ |
1869412666305413120 |
| spelling |
Enabling collaborative intelligence in heterogeneous edge to cloud continuumPalomares Torrecilla, Javier|||0009-0003-6523-4887Edge-to-Cloud ContinuumMulti-access Edge Computing (MEC)Network Function Virtualization (NFV)AI-driven orchestrationDeep Reinforcement Learning (DRL)Multi-agent systemsFairness-aware schedulingResource allocationIndustrial automationMulti-AGV coordinationDistributed intelligenceScalability and adaptability.621.3 - Enginyeria elèctrica. Electrotècnia. TelecomunicacionsÀrees temàtiques de la UPC::Enginyeria de la telecomunicacióTesi amb menció de Doctorat Internacional i de Doctorat Industrial(English) The growing convergence of the Industrial Internet of Things (IIoT), Artificial Intelligence (AI), and Multi-access Edge Computing (MEC) is reshaping service orchestration across the Edge-to-Cloud Continuum. These paradigms enable intelligent and flexible applications in heterogeneous, resource-constrained environments. A representative use case is multi-Automated Guided Vehicle (AGV) systems in smart factories, where moving agents must make time-sensitive decisions while adapting to variable connectivity, shifting computational loads, and coordinating with remote control logic. These scenarios demand orchestration mechanisms that dynamically integrate mobility, computation, and communication across infrastructure tiers. However, such systems exhibit highly dynamic behavior, driven by factors like device mobility and fluctuating resource availability, which creates significant challenges for scalable, fair, and autonomous orchestration under strict service guarantees. To address these demands, this thesis proposes a novel architecture unifying Information Technology and Operational Technology, extending MEC orchestration to the factory floor. It introduces an enhanced MEC orchestrator (MEO) and extended service descriptors to capture hardware-aware, location-sensitive, and non-computational constraints, enabling precise, constraint-driven placement across the Continuum. The approach is validated through a multi-AGV coordination use case. To optimize service placement, two orchestration mechanisms based on Deep Reinforcement Learning (DRL) are introduced. The first, a DRL-based Multi-Task Scheduling (DRL-MTS) strategy, minimizes end-to-end delay by distributing tasks across nodes while respecting resource availability. The second, the Intelligent Placement Algorithm (IPA), enables hardware-aware deployment by accounting for resource granularity and spatial constraints. Both integrate context-aware scheduling for adaptive and efficient placement. For decentralized coordination, this thesis proposes multi-agent learning strategies. The Multi-Agent Collaborative Protocol for Dynamic Resource Allocation (MACP-DRA) uses DRL to ensure fair and efficient placement under competition and resource constraints. The Multi-Agent Dynamic Bandwidth Environment (MADBE) manages bandwidth across heterogeneous service tiers with diverse communication demands, enabling real-time adaptation through policy specialization and aggregation. To further reduce bottlenecks in collaborative training, an Explicit Congestion Notification–based gradient compression mechanism for federated learning lowers bandwidth overhead while preserving accuracy. Collectively, these contributions enhance adaptability, communication efficiency, and fairness, enabling scalable and robust coordination across the Continuum. This thesis employs system modeling, algorithm design, and simulation-driven evaluation in realistic industrial scenarios with dynamic workloads, agent competition, and variable networks. The framework outperforms state-of-the-art baselines in latency, bandwidth, fairness, and SLA compliance. Its modular architecture and enriched descriptors enable constraint-aware deployment at the industrial edge, with the MEO supporting federated and cross-domain coordination. DRL mechanisms improve delay-sensitive scheduling, while multi-agent strategies ensure fairness and resilience. Validated through large-scale simulations and an emulated multi-AGV testbed, the approach achieves higher placement success, lower latency, better resource use, and reduced conflicts, establishing a foundation for research on distributed decision-making, cross-domain orchestration, and AI-driven automation.(Català) La creixent convergència de la Internet industrial de les coses (IIoT, Industrial Internet of Things), la intel·ligència artificial (IA) i la computació perimetral multiaccés (MEC, Multi-access Edge Computing) està transformant l’orquestració de serveis al llarg del continu heterogeni des de la perifèria de la xarxa (edge) al núvol (cloud). Aquests paradigmes permeten aplicacions intel·ligents i flexibles en entorns heterogenis i amb recursos limitats. Un cas representatiu són els sistemes multi-vehicle guiat automàtic (multi-AGV, multi-Automated Guided Vehicle) en fàbriques intel·ligents, on els agents han de prendre decisions en temps real mentre s’adapten a la variabilitat de la connectivitat, les càrregues de treball i la coordinació amb la lògica remota. Aquests escenaris exigeixen mecanismes capaços d’integrar mobilitat, computació i comunicació a través de diferents nivells d’infraestructura. Tanmateix, la mobilitat dels dispositius i la fluctuació de recursos generen reptes per assolir una orquestració escalable, justa i autònoma amb estrictes acords de nivell de servei (SLA, Service-Level Agreement). En resposta a aquestes demandes, la tesi proposa una arquitectura que unifica la Tecnologia de la Informació (IT, Information Technology) i la Tecnologia Operacional (OT, Operational Technology), estenent l’orquestració MEC fins al nivell de planta. S’introdueix un orquestrador MEC millorat (MEO) i descriptors de servei enriquits que consideren restriccions de maquinari, ubicació i factors no computacionals, permetent un posicionament precís de serveis al Continu. L’enfocament es valida amb un cas de coordinació multi-AGV. Per optimitzar el posicionament, es presenten dos mecanismes basats en aprenentatge per reforç profund (DRL, Deep Reinforcement Learning). El primer, la planificació multitasca basada en DRL (DRL-MTS, DRL-based Multi-Task Scheduling), redueix el retard extrem a extrem distribuint tasques entre nodes. El segon, l’algoritme intel·ligent de col·locació (IPA, Intelligent Placement Algorithm), permet desplegaments sensibles al maquinari considerant la granularitat dels recursos i les restriccions espacials. Tots dos integren planificació sensible al context per a un posicionament adaptatiu i eficient. En coordinació descentralitzada, la tesi introdueix estratègies d’aprenentatge multiagent. El Protocol Col·laboratiu Multiagent per a l’Assignació Dinàmica de Recursos (MACP-DRA) garanteix un posicionament just i eficient sota competència i limitacions de recursos. L’entorn multiagent d’ample de banda dinàmic (MACP-DRA) gestiona el repartiment d’ample de banda entre nivells heterogenis amb demandes diverses, adaptant-se en temps real mitjançant especialització de polítiques i agregació contextual. A més, s’incorpora un mecanisme de compressió de gradients basat en Notificació Explícita de Congestió (ECN) per a aprenentatge federat, que redueix la càrrega de xarxa sense comprometre la precisió. En conjunt, aquestes contribucions milloren adaptabilitat, eficiència i equitat, permetent una coordinació robusta al llarg del Continu. La tesi combina modelatge de sistemes, disseny d’algoritmes i avaluació amb simulacions en escenaris industrials realistes amb càrregues dinàmiques, competència entre agents i xarxes variables. Els resultats mostren que el marc supera els enfocaments de referència en latència, ús d’ample de banda, equitat i compliment de SLA. L’arquitectura modular i els descriptors enriquits permeten desplegaments sensibles a restriccions a la perifèria industrial, mentre que el MEO facilita l’orquestració federada i entre dominis. Validat amb simulacions a gran escala i un banc de proves multi-AGV, el marc assoleix una major taxa d’èxit en el posicionament, menor latència, millor ús dels recursos i menys conflictes, establint les bases per a noves recerques en presa de decisions distribuïda, col·laboració entre dominis i automatització industrial impulsada per IA.(Español) La creciente convergencia del Internet industrial de las cosas (IIoT, Industrial Internet of Things), la inteligencia artificial (IA) y la computación en el borde de acceso múltiple (MEC, Multi-access Edge Computing) está transformando la orquestación de servicios a lo largo del Continuo desde la periferia de la red (edge) a la nube (cloud). Estos paradigmas permiten aplicaciones inteligentes y flexibles en entornos heterogéneos y con recursos limitados. Un caso representativo son los sistemas multi-vehículo guiado automático (multi-AGV, multi-Automated Guided Vehicle) en fábricas inteligentes, donde los agentes deben tomar decisiones en tiempo real mientras se adaptan a la variabilidad de la conectividad, las cargas de trabajo y la coordinación con la lógica remota. Estos escenarios exigen mecanismos capaces de integrar movilidad, computación y comunicación a través de distintos niveles de infraestructura. Sin embargo, la movilidad de los dispositivos y la fluctuación de recursos plantean retos para lograr una orquestación escalable, justa y autónoma con estrictos acuerdos de nivel de servicio. Para abordar estas demandas, esta tesis propone una arquitectura que unifica la Tecnología de la Información (IT, Information Technology) y la Tecnología Operacional (OT, Operational Technology), extendiendo la orquestación MEC hasta el nivel de planta. Se introduce un orquestador MEC mejorado (MEO) y descriptores de servicio enriquecidos que consideran restricciones de hardware, ubicación y no computacionales, habilitando un posicionamiento preciso de servicios en el Continuo. El enfoque se valida mediante un caso de coordinación multi-AGV. Para optimizar el posicionamiento, se presentan dos mecanismos basados en aprendizaje por refuerzo profundo (DRL, Deep Reinforcement Learning). El primero, la planificación multi-tarea basada en DRL (DRL-MTS, DRL-based Multi-Task Scheduling), reduce el retardo extremo a extremo distribuyendo tareas entre nodos. El segundo, el algoritmo inteligente de posicionamiento (IPA), permite despliegues sensibles al hardware considerando granularidad de recursos y restricciones espaciales. Ambos integran planificación sensible al contexto para un posicionamiento adaptativo y eficiente. En coordinación descentralizada, la tesis introduce estrategias de aprendizaje multiagente. El Protocolo Colaborativo Multiagente para la Asignación Dinámica de Recursos (MACP-DRA) asegura un posicionamiento justo y eficiente bajo competencia y limitaciones de recursos. El Entorno Multiagente de Ancho de Banda Dinámico (MADBE) gestiona el reparto de ancho de banda entre niveles heterogéneos con demandas diversas, adaptándose en tiempo real mediante especialización de políticas y agregación contextual. Además, se incorpora un mecanismo de compresión de gradientes basado en Notificación Explícita de Congestión (ECN) para aprendizaje federado, que reduce la sobrecarga de red sin comprometer precisión. En conjunto, estas contribuciones mejoran adaptabilidad, eficiencia y equidad, habilitando una coordinación robusta a lo largo del Continuo. La tesis combina modelado de sistemas, diseño de algoritmos y evaluación con simulaciones en escenarios industriales realistas con cargas dinámicas, competencia entre agentes y redes variables. Los resultados muestran que el marco supera a los enfoques de referencia en latencia, uso de ancho de banda, equidad y cumplimiento de SLA. La arquitectura modular y los descriptores enriquecidos permiten despliegues sensibles a restricciones en el borde industrial, mientras que el MEO facilita la orquestación federada y entre dominios. Validado mediante simulaciones a gran escala y un banco de pruebas multi-AGV, el marco logra mayor tasa de éxito en el posicionamiento, menor latencia, mejor utilización de recursos y menos conflictos, sentando la base para nuevas investigaciones en toma de decisiones distribuida, colaboración entre dominios y automatización industrial impulsada por IA.Universitat Politècnica de Catalunya20252025-11-2520252025-12-2320262026-08-11doctoral thesishttp://purl.org/coar/resource_type/c_db06VoRhttp://purl.org/coar/version/c_970fb48d4fbd8a85info:eu-repo/semantics/doctoralThesisapplication/pdfhttps://hdl.handle.net/2117/449590https://dx.doi.org/10.5821/dissertation-2117-449590reponame:UPCommons. Portal del coneixement obert de la UPCinstname:Universitat Politècnica de Catalunya (UPC)Inglésengembargoed accesshttp://purl.org/coar/access_right/c_f1cfinfo:eu-repo/semantics/embargoedAccessoai:upcommons.upc.edu:2117/4495902026-05-27T15:37:01Z |
| score |
15.812429 |