I detta dokument föreslås en ny algoritm som heter Dual Actor-Criticor Dual-AC. Det härleds på ett principfast sätt från Lagrangian dual form av Bellman optimalitet ekvation, som kan ses som en två-spelare spel mellan skådespelaren och en kritiker-liknande funktion, som kallas dual kritiker. Jämfört med sina skådespelare-kritiska släktingar har Dual-AC den önskade egenskapen att skådespelaren och dubbla kritiker uppdateras samarbetsvilligt för att optimera samma objektiva funktion, vilket ger ett öppnare sätt att lära sig den kritiker som är direkt relaterad till den objektiva funktionen av skådespelaren. Vi tillhandahåller sedan en betongalgoritm som effektivt kan lösa minimax-optimeringsproblemet med hjälp av tekniker för flerstegs bootstrappning, vägreglering och stokastisk dubbel stigningsalgoritm. Vi visar att den föreslagna algoritmen uppnår de senaste resultaten över flera riktmärken.
al REF som Dual-Critic arkitektur där kritikern inte uppdateras med hjälp av standard algoritmer för tidsskillnad, men den är optimerad enligt skådespelarens gradient.
Boosting the Actor with Dual Critic
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science', 'Mathematics']}