Soutenance de thèse : Mateus MOTA

Protocol Emergence with Multi-agent Reinforcement Learning

Doctorant : Mateus MOTA

Laboratoire INSA : CITI
Ecole doctorale : ED160 : Electronique, Electrotechnique, Automatique

Dans ce travail, nous proposons une technique de conception de protocole automatisée appelée émergence de protocole. Lors de l'émergence d'un protocole, les nœuds du réseau échangent des messages de contrôle afin de se coordonner pour transmettre des données à travers le réseau, mais sans aucun accord préalable sur la signification de ces messages. Cela peut être considéré comme une technique conjointe de signalisation et d’optimisation du réseau, le principal problème de réseau sans fil étudié dans ce travail étant la planification.

Premièrement, les principes fondamentaux de l'émergence des protocoles sont présentés en introduisant un cadre décrivant les méthodes d'évaluation, de caractérisation, de coordination entre nœuds et d'interprétation des performances des protocoles. Ce cadre est étudié dans un problème d'accès multiple slotté.

Dans la deuxième partie de ce travail, nous évaluons les performances d'émergence de protocoles dans un scénario plus difficile impliquant une allocation de ressources contiguës. Ce scénario difficile est utilisé pour évaluer les capacités d'apprentissage et les limites de l'émergence de protocoles, illustrant par exemple la robustesse de certains paramètres et les défis liés à l'évolutivité de l'UE.

Dans la troisième partie de ce travail, nous évaluons l'émergence de protocoles sous contraintes de signalisation, dans un scénario d'allocation non contiguë avec signalisation intermittente. Dans cette étude, nous nous concentrons sur la production d’une méthode dans laquelle le débit binaire de contrôle utilisé par le protocole peut être contrôlé. Les résultats mettent en évidence l'effet du coût de signalisation sur la réduction du débit binaire de contrôle et son effet sur la coordination et les performances.