Esenciální stav je stav Markovova řetězce, po jehož opuštění se do něj může vždy vrátit.
Nechť je dán homogenní Markovův řetězec s diskrétním časem a diskrétním stavovým prostorem . Pak se stav nazývá nedůležitý , pokud nějaký stav existuje a takový
, ale .Jinak se stát nazývá esenciální .
Neesenciální stavy nehrají při studiu dlouhodobého chování Markovova řetězce roli, a proto jsou nejčastěji ignorovány.
Nechť je stavový prostor Markovova řetězce konečný: a matice pravděpodobností přechodu má tvar:
.Pak stavy a jsou nepodstatné, zatímco a jsou podstatné.
Markovových řetězců | Klasifikace stavů a|
---|---|
Stát | |
Řetěz |