Markovovy modely

Markovovy modely jsou funkce dvou náhodných proměnných, stavu systému a doby nebo jiné veličiny, v závislosti na které stav sledujeme.  Obecně se využívají pro výpočet spolehlivosti obnovovaných systémů v případě, že mají doby provozu a doby obnovy exponenciální rozdělení. S ohledem na popis etapy života výrobků vanovou křivkou se tedy jedná o popis období běžného provozu kde by měla být konstantní a zároveň nízká intenzita poruch. 

S ohledem na čas, ve kterém je možno analyzovat se dále modely dělí na:

Markovův řetězec

-          diskrétní čas – ke změně stavu může dojít jen v určitých časových okamžicích

-          diskrétní stav soustavy

Markovův proces           

-          spojitý čas – ke změně stavu prvků může dojít v kterémkoliv okamžiku.

-          diskrétní stav soustavy