ДОПОЛНИТЕЛЬНЫЕ ПРИЛОЖЕНИЯ

6.29. Математические машины и цепи Маркова

Многие реальные системы можно характеризовать, выделяя различные состояния, в которых они могут находиться, и задавая их реакции на поступление произвольных входных воздействий при нахождении систем в любом заданном состоянии. Как правило, реакция

системы проявляется в форме перехода из одного состояния в другое и формирования соответствующего выходного сигнала. Формализация предыдущей идеи приводит к понятию математической машины.

Последние работы по теории математических машин (называемой иногда теорией автоматов) как будто бы имеют мало общего с глубокими исследованиями Геделя, Тьюринга и других специалистов по математической логике.

Новые теории в основном опираются на элементарные теоремы, но тем не менее приводят к трудным комбинаторным задачам, которые, вероятно, удобно решать методами теории графов.

Определение. Машина есть математическая система, которая состоит из

1) конечного множества элементов, называемых состояниями,

2) конечного множества элементов, называемых входами,

3) конечного множества элементов, называемых выходами,

4) функции перехода которая отображает на

5) функции выхода которая отображает на

Если то интерпретируется как следующее состояние, в которое попадает машина из текущего состояния при воздействии входного сигнала х. Аналогично, есть выходной сигнал машины, находящейся в состоянии при воздействии входного сигнала х. Множества называются соответственно входным и выходным алфавитом (хотя природа их элементов существенно изменяется в зависимости от рассматримаемых задач).

Машины, соответствующие данному определению, можно классифицировать по нескольким признакам. Во-первых, они являются детерминированными, так как их выходной сигнал и следующее состояние полностью определяются входным сигналом и текущим состоянием. Далее, такие машины являются последовательностными; так как входные сигналы подаются в дискретные моменты времени а не непрерывно. Они являются

полными, т. е. каждая комбинация состояния и входного сигнала (входа) имеет смысл и дает известный выходной сигнал (выход) и новое состояние. Они не имеют памяти в том смысле, что текущий выход и следующее состояние не зависят от прошлых входов, состояний или выходов. Наконец, они стационарны в том смысле, что функция переходов и функция выхода не зависят от рассматриваемого момента времени. Изменив некоторые или все из названных предположений, можно получить определение машины более общего вида.

Иногда машину удобно изображать ориентированным графом, вершины которого соответствуют состояниям, а дуги характеризуют

Сказанное проще всего пояснить на примере. Рассмотрим машину, для которой

Одна из возможных машин с множеством состояний 5 и алфавитами представлена в виде графа рис. 6.68.

Рис. 6.68.

Каждая вершина соответствует одному состоянию. Начальная вершина инцидентна точно двум дугам (в общем случае, к дугам, где k — число различных входов). Если некоторая дуга идет из вершины в вершину и ей соответствует упорядоченная пара то Например, если текущее состояние системы то вход даст выход и переведет систему в состояние С другой стороны, вход 1 дает выход а и система останется в состоянии (Практически число дуг можно уменьшить, помечая некоторые дуги несколькими упорядоченными парами, если несколько входов дают одно и то же следующее состояние.)

Отдельные состояния и множества можно классифицировать по структурным признакам соответствующего графа. Например, машина называется сильно связной, если ей соответствует сильно связный граф. Независимо от начального состояния такую машину можно всегда перевести в любое другое состояние с помощью соответствующей последовательности входов (не обязательно за один шаг). Состояние называется переходным, если из соответствующей ему вершины выходит, по крайней мере, одна дуга где и если эта вершина не является конечной ни для одной дуги где Например, переходное состояние. Состояние которому соответствует вершина, являющаяся конечной, по крайней мере, для одной дуги где и не являющаяся начальной ни для одной дуги где называется устойчивым. (Рассматриваемая машина не имеет отдельных устойчивых состояний. Однако состояние совместно образует в соответствующем смысле устойчивое множество состояний).

При заданном начальном состоянии и произвольной ленте или конечной последовательности входов с помощью графа можно легко определить результирующее конечное состояние (после переходов) и соответствующую выходную последовательность Например, если в текущий момент машина находится в состоянии и следующие пять входов равны 1, 1, О, 1, 0, то она последовательно перейдет в состояние и выходные сигналы будут равны а.

Отметим следующие классы задач, существующие в теории абстрактных машин.

1. Анализ реакции (переходов и выходов) заданной машины.

2. Синтез машины с заданными характеристиками реакций.

3. Приведение машины к более простой в некотором смысле эквивалентной форме.

Более подробное рассмотрение вопросов, связанных с теорией абстрактных машин, читатель может найги в работах Жилля и Гинзбурга [32]. В данном случае нам хотелось лишь подчеркнуть, что одним из удобных способов представления таких машин являются

ориентированные графы с соответствующей символикой. В частности, их удобно использовать для классификации машин и некоторых видов их анализа.

Идея марковской цепи в некотором смысле является вероятностным аналогом абстрактных детерминированных машин. Здесь снова мы имеем систему, которая может находиться в одном из конечного числа состояний и изменять состояние в дискретные моменты времени. Однако при этом переходы не зависят от управляемых входов, а определяются распределениями вероятностей. Выходные переменные в данном случае отсутствуют. Наибольший интерес в такой модели представляет распределение вероятностей состояний как функция времени при заданном начальном состоянии.

Цепь Маркова формально можно определить как систему, которая состоит из

1) конечного множества элементов, называемых состояниями,

2) -матрицы переходов где вероятность того, что в следующий момент наблюдения система будет находиться в состоянии при условии, что в текущий момент она находится в состоянии Конечно, требуется, чтобы выполнялось соотношение

Определенная таким образом цепь Маркова называется иногда стационарной (или не зависящей от времени), в отличие от цепи Маркова более общего вида, в которой вероятности переходов могут быть функциями времени.

Цепи Маркова соответствует ориентированный граф. Вершины графа определяются состояниями цепи. Каждой дуге из поставлено в соответствие число в случае (т. е. в случае, когда возможен одношаговын переход из Граф цепи Маркова с пятью состояниями показан на рис. 6.69. Если текущее состояние системы то она переходит в состояние или остается в с вероятностями 0,2; 0,3 и 0,5 соответственно. Другие дуги интерпретируются аналогично.

Качественную классификацию состояний или множеств состояний можно провести на основе структурных

свойств графа без учета конкретных значений вероятностей (различаются только нулевые и ненулевые вероятности). Например, множество состояний называется поглощающим, если ориентированный разрез является пустым (т. е. из состояний в нельзя попасть ни в какие другие состояния, не принадлежащие

Рис. 6.69.

В частности, отдельное состояние является поглощающим тогда и только тогда, когда Цепь Маркова называется эргодической, если соответствующий граф сильно связен. Таким образом, эргодическая цепь это такая цепь, для которой при любом текущем состоянии существует ненулевая вероятность достижения любого другого состояния за соответствующее число шагов (переходов).

Рис. 6.70.

Эргодическая цепь называется регулярной, если существует положительное целое число такое, что для любых состояний (возможно есть путь из имеющий в точности дуг для всех Цепь на рис. 6.70, а, например, является эргодической, но

нерегулярной. (Действительно, если начать, скажем, с то можно оказаться в только после четного числа шагов.) В отличие от нее, цепь рис. 6.70, b регулярна.

Упражнения

(см. скан)