Procesul de decizie Markov (MDP)

Autor: Laura McKinney
Data Creației: 5 Aprilie 2021
Data Actualizării: 22 Iunie 2024
Anonim
Markov Decision Processes (MDPs) - Structuring a Reinforcement Learning Problem
Video: Markov Decision Processes (MDPs) - Structuring a Reinforcement Learning Problem

Conţinut

Definiție - Ce înseamnă procesul de decizie Markov (MDP)?

Un proces de decizie Markov (MDP) este un lucru pe care profesioniștii îl numesc „un proces discret de stoc stocastic de timp”. Se bazează pe matematica pionieră de academicianul rus Andrey Markov la sfârșitul secolului XIX și începutul secolului XX.


O introducere în Microsoft Azure și Microsoft Cloud | În acest ghid, veți afla despre ce este vorba despre cloud computing și despre cum Microsoft Azure vă poate ajuta să migrați și să conduceți afacerea din cloud.

Techopedia explică procesul de decizie Markov (MDP)

O modalitate de a explica un proces de decizie Markov și lanțurile asociate Markov este că acestea sunt elemente ale teoriei moderne a jocurilor, bazate pe cercetări matematice mai simple de către omul de știință rus în urmă cu câteva sute de ani. Descrierea unui proces de decizie Markov este că studiază un scenariu în care un sistem se află într-un anumit set de state și se îndreaptă către un alt stat bazat pe deciziile unui factor de decizie.

Un lanț Markov ca model arată o secvență de evenimente în care probabilitatea unui eveniment dat depinde de o stare atinsă anterior. Profesioniștii pot vorbi despre un „spațiu de stat contabil” în descrierea procesului de decizie Markov - unii asociază ideea modelului de decizie Markov cu un model „mers la întâmplare” sau un alt model stocastic, bazat pe probabilități (modelul de mers aleatoriu, adesea citat pe perete Street, modelează mișcarea unei acțiuni în sus sau în jos, în raport cu probabilitatea pieței).


În general, procesele de decizie Markov sunt adesea aplicate la unele dintre cele mai sofisticate tehnologii la care profesioniștii lucrează astăzi, de exemplu, în robotica, automatizarea și modelele de cercetare.