Il prossimoProssima guida
Apprendimento per rinforzo
Tecnico
GUIDA AI FONDAMENTALI
Multi-agent reinforcement learning studies settings where multiple decision-making agents learn in a shared environment.
Ascolta questa guidaNarrato dall'IA · ~2 min
Agents may cooperate, compete, or have mixed incentives, and each agent’s learning changes the environment faced by others.
Lowe et al. describe MADDPG, which uses centralized critics during training for multi-agent continuous control and decentralized actors at execution. Rashid et al.’s QMIX uses a monotonic mixing network over individual utilities; Sunehag et al.’s VDN sums individual action-values. These are methods for particular cooperative or mixed settings, not interchangeable solutions. Markov games extend the MDP framing to multiple agents with state transitions and agent-specific actions/rewards.
In a cooperative benchmark, agents can share a team reward while observing different parts of the environment.
Centralized-training methods may use global state during training and local observations during execution.
Value decomposition methods such as VDN and QMIX represent team values using individual agent values under different structural assumptions.
Self-play can train against copies or versions of a policy, as evaluated in particular competitive-game studies.
Choose methods by the environment’s observability, reward structure, communication limits and evaluation task. Report benchmark and training conditions because a result on one multi-agent scenario does not guarantee transfer to another. The cited papers do not establish broad current deployments in warehouses, traffic or healthcare.
Newsletter gratuita
Tre storie verificate sull'IA ogni mattina nei giorni feriali, scritte in un inglese semplice. Gratuito per sempre, senza pubblicità.
Un'email ogni giorno feriale. Disiscriviti con un clic. Non vendiamo né condividiamo mai il tuo indirizzo.
Mettiti alla prova
Feedback immediato su ogni risposta e un certificato condivisibile con un ID verificabile una volta superato un corso.
Sostieni l'istruzione gratuita sull'IA. AI Understanding è un'organizzazione non profit 501(c)(3) — nessun annuncio, nessun paywall, mai. Fai una donazione
Multi-agent reinforcement learning studies settings where multiple decision-making agents learn in a shared environment. Agents may cooperate, compete, or have mixed incentives, and each agent’s learning changes the environment faced by others.
Poiché ogni agente aggiorna la propria politica durante la formazione, ogni agente si trova effettivamente di fronte a un bersaglio in movimento: le dinamiche dell'ambiente cambiano man mano che gli altri apprendono.
I metodi CTDE come MADDPG e QMIX sfruttano le informazioni globali per un apprendimento stabile, mentre ciascun agente viene eseguito utilizzando solo le proprie osservazioni.
I giochi di Markov (chiamati anche giochi stocastici) estendono gli MDP prevedendo azioni congiunte e premi per agente tra più decisori.
Le impostazioni cooperative danno agli agenti un obiettivo condiviso, quindi la sfida diventa coordinare le azioni e assegnare crediti all’interno del team.
The OpenAI Five paper describes large-scale self-play, including games against versions of the policy. AlphaStar also used human-game data in its training, so this item is specific to OpenAI Five.
Continua a imparare
Altre guide selezionate per questo argomento
Il prossimoProssima guida
Apprendimento per rinforzo
Tecnico