RECHERCHE
Lighthouse RL : optimiser le dimensionnement de circuits analogiques avec moins d'essais
Une nouvelle stratégie de reset guidé par des configurations performantes améliore l'efficacité et la généralisation du RL pour la conception de circuits.
arXiv cs.AI · cs.LG · cs.CL·Mustafa Emre Gürsoy, Stefan Uhlich, Ryoga Matsuo, Yağız Gençer·15 juillet 2026

Image · Source originale
Lighthouse RL introduit une stratégie de reset stratégique qui réinitialise les épisodes à partir de configurations performantes découvertes en cours d'entraînement, appelées « lighthouses ». Cette approche oriente l'exploration vers des régions prometteuses, réduisant le gaspillage de ressources typique du RL classique. Les auteurs rapportent jusqu'à 1,72x d'efficacité d'échantillonnage en plus, un taux de succès de 100% contre 0-87% pour les méthodes concurrentes, et une meilleure généralisation à de nouveaux objectifs. La méthode est conçue comme un module plug-and-play compatible avec toute approche RL existante.