Controlul bazat pe învățare: Un tutorial și câteva rezultate recente

Recenzii ale cititorilor

În prezent, nu există recenzii ale cititorilor. Evaluarea se bazează pe 2 voturi.

Titlul original:

Learning-Based Control: A Tutorial and Some Recent Results

Conținutul cărții:

Succesul recent al învățării prin consolidare și al metodelor conexe poate fi atribuit mai multor factori-cheie. În primul rând, este determinată de semnalele de recompensă obținute prin interacțiunea cu mediul. În al doilea rând, este strâns legată de comportamentul uman de învățare. În al treilea rând, are o bază matematică solidă. Cu toate acestea, teoria convențională a învățării prin întărire prezintă unele deficiențe, în special într-un mediu continuu sau în luarea în considerare a stabilității și robusteții procesului controlat.

În această monografie, autorii se bazează pe Reinforcement Learning pentru a prezenta o abordare bazată pe învățare pentru controlul sistemelor dinamice din date în timp real și trec în revistă unele evoluții majore în acest domeniu relativ tânăr. Astfel, autorii dezvoltă un cadru pentru teoria controlului bazat pe învățare care arată cum să învețe direct controlori suboptimali din datele de intrare-ieșire.

Există trei provocări principale privind dezvoltarea controlului bazat pe învățare. În primul rând, este necesar să se generalizeze metodele recursive existente. În al doilea rând, ca o diferență fundamentală între controlul bazat pe învățare și Reinforcement Learning, stabilitatea și robustețea sunt aspecte importante care trebuie abordate pentru sistemele inginerești critice pentru siguranță, cum ar fi mașinile care se conduc singure. În al treilea rând, eficiența datelor algoritmilor de învățare prin consolidare trebuie abordată pentru sistemele inginerești esențiale pentru siguranță.

Această monografie oferă cititorului o introducere accesibilă într-o nouă direcție a teoriei controlului, aflată încă în fază incipientă, și anume Teoria controlului bazată pe învățare, care este strâns legată de literatura de specialitate privind învățarea prin întărire în condiții de siguranță și programarea dinamică adaptivă.