Содержание
- Определение - что означает Марковский процесс принятия решений (MDP)?
- Введение в Microsoft Azure и Microsoft Cloud | Из этого руководства вы узнаете, что такое облачные вычисления и как Microsoft Azure может помочь вам перенести и запустить свой бизнес из облака.
- Techopedia объясняет Марковский процесс принятия решений (MDP)
Определение - что означает Марковский процесс принятия решений (MDP)?
Марковский процесс принятия решений (MDP) - это то, что профессионалы называют «стохастическим процессом управления в дискретном времени». Он основан на математике, впервые разработанной русским академиком Андреем Марковым в конце 19 и начале 20 веков.
Введение в Microsoft Azure и Microsoft Cloud | Из этого руководства вы узнаете, что такое облачные вычисления и как Microsoft Azure может помочь вам перенести и запустить свой бизнес из облака.
Techopedia объясняет Марковский процесс принятия решений (MDP)
Один из способов объяснить марковский процесс принятия решений и связанные с ним марковские цепочки состоит в том, что это элементы современной теории игр, основанные на более простом математическом исследовании российского ученого несколько сотен лет назад. Описание процесса принятия решений по Маркову состоит в том, что он изучает сценарий, в котором система находится в некотором заданном наборе состояний, и перемещается вперед в другое состояние на основе решений лица, принимающего решения.
Цепочка Маркова как модель показывает последовательность событий, в которой вероятность данного события зависит от ранее достигнутого состояния. Профессионалы могут говорить о «исчисляемом пространстве состояний» при описании процесса принятия решений Маркова - некоторые связывают идею модели решений Маркова с моделью «случайного блуждания» или другой стохастической моделью, основанной на вероятностях (модель случайного блуждания, часто цитируемая на Wall Улица, моделирует движение капитала вверх или вниз в зависимости от рыночной вероятности.
В общем, процессы принятия решений Маркова часто применяются к некоторым из самых сложных технологий, над которыми сегодня работают профессионалы, например, в робототехнике, автоматизации и моделях исследований.