Багато випадкових процесів, які розглядають під час аналізу небезпеки потенційно небезпечних об'єктів, є окремим класом випадкових процесів, які називають марківськими.
Марківський процес – це випадковий процес, за якого подальша поведінка системи S після моменту часу t залежить тільки від стану системи в цей момент і не залежить від поведінки процесу в попередній період (до моменту часу t).
Перехідна ймовірність (перехідна ймовірнісна функція) Р(t, х, s, Е) – ймовірність того, що система, перебуваючи у момент часу t у стані x, у момент часу s > t потрапить в один зі станів множини Е.
Якщо x – скінченний або зліченний фазовий простір, а час неперервний, то перехідна ймовірність визначається функціями , що дорівнюють умовній ймовірності того, що система знаходиться в j-му стані в момент s, якщо в момент t вона знаходилася в i-му стані. Тобто перший індекс завжди визначатиме попередній стан, а другий показує, в який стан перейде система в наступний момент часу.
Дискретний чи неперервний випадковий процес х(0 називають простим марківським процесом, якщо для кожної скінченної множини
(4.1)
або
відповідно.
Повна ймовірнісна картина можливих змін, що відбуваються внаслідок переходу з одного стану безпосередньо в наступний, задається матрицею
складеною з ймовірностей переходу, яку називають матрицею переходу. Зауважимо, що елементи матриці невід'ємні, а сума елементів будь-якого рядка дорівнює 1.
Марківський процес цілком визначається своїм розподілом ймовірностей другого порядку, й отже, може бути заданий розподілами ймовірностей першого порядку і ймовірностей переходу
(4.2)
Марківські випадкові послідовності часто називають ланцюгами Маркова [25].
Багато фізичних процесів можна описати як марківські. Так, прикладами марківських випадкових послідовностей є багаторічні коливання об'ємів стоку річок упродовж року, річних опадів тощо.
Важливий клас завдань полягає в пошуку функцій (4.2) за їхніми “початковими значеннями” при. Із властивості (4.1) марківського процесу випливає рівняння Колмогорова–Смолу- ховського–Чепмена [12]:
(4.3)
або
Сторінки
В нашій електронній бібліотеці ви можете безкоштовно і без реєстрації прочитати «Природний, техногенний та екологічний ризики: аналіз, оцінка, управління» автора Автор невідомий на телефоні, Android, iPhone, iPads. Зараз ви знаходитесь в розділі „Марківський процес“ на сторінці 1. Приємного читання.
