Les réseaux de capteurs sous-marins (UWSN) surveillent les océans, détectent les événements sismiques et explorent l'environnement. Cependant, ces réseaux souffrent également de plusieurs limitations, notamment une topologie dynamique, un retard de propagation, une bande passante limitée, des ressources énergétiques limitées et le problème des nœuds vides. Le problème des nœuds vides se produit lorsque des nœuds n'ont pas de voisins de prochain saut pour transmettre des paquets de données, ce qui entraîne une perte de données et une consommation d'énergie accrue. Pour remédier à ces lacunes, cet article présente D2PG-RP, un protocole de routage basé sur le gradient de politique déterministe profond pour les UWSN, afin d'optimiser la performance du réseau et la consommation d'énergie. D2PG-RP utilise un réseau acteur-critique pour optimiser les décisions de routage afin de minimiser la consommation d'énergie lors de la transmission de paquets de données. L'approche proposée intègre une fonction de récompense basée sur des paramètres critiques, y compris des informations de profondeur, un retard de propagation, de l'énergie résiduelle, le facteur de mobilité des nœuds (NMF), le score de réputation des nœuds (NRS) et le niveau d'interférence acoustique (AIL) pour atténuer l'impact du problème des nœuds vides, et sélectionner des nœuds stables et fiables pour le transfert de données sans bruit excessif. Nous avons effectué la simulation dans MATLAB 2024b. Les résultats de notre étude de simulation pour les réseaux de capteurs sous-marins démontrent que D2PG-RP surpasse les modèles de Q-learning traditionnels en termes de consommation d'énergie, de durée de vie du réseau, de retard de bout en bout et de ratio de livraison des paquets.
Gola et al. (Sun,) ont étudié cette question.