Asignación de recursos basada en DDPG distribuido para la minimización de la edad de la información en el Internet de las Cosas móvil alimentado por energía inalámbrica

Como una métrica vital de la puntualidad de la información, la edad de la información (AoI) es importante para aplicaciones en tiempo real en el Internet de las Cosas (IoT), como el monitoreo de la salud. Para satisfacer estos requisitos, estudiamos un IoT alimentado por energía inalámbrica (WPIoT), donde un punto de acceso híbrido estático (HAP) coordina la transferencia de energía inalámbrica a nodos IoT móviles, y los nodos IoT móviles transmiten datos al HAP o nodos IoT estáticos. Minimizamos la AoI de los nodos IoT móviles optimizando la selección del HAP o del nodo IoT estático para la transmisión, la selección del canal, la duración de la transmisión de datos y la potencia de transmisión, y probamos que el problema de minimización de AoI es NP-difícil. Para abordar esto, proponemos un algoritmo de asignación de recursos distribuido de múltiples nodos basado en gradiente de política determinista profundo (DDPG) (DDMRA), que combina las ventajas de los algoritmos distribuidos y centralizados, y combina la selección de acciones discretas en el algoritmo DQN dentro del algoritmo DDPG. En el algoritmo DDMRA, los nodos IoT móviles ahorran el consumo de energía al transmitir información de estado al HAP. Los resultados numéricos validan el rendimiento superior del algoritmo DDMRA en comparación con algoritmos de referencia.