Распознанный текст, спецсимволы и формулы могут содержать ошибки, поэтому с корректным вариантом рекомендуем ознакомиться на отсканированных изображениях учебника выше
Также, советуем воспользоваться поиском по сайту, мы уверены, что вы сможете найти больше информации по нужной Вам тематике
3.1. ОТСУТСТВИЕ ИЛИ ОГРАНИЧЕННЫЕ СВЕДЕНИЯ ОБ АПРИОРНОМ РАСПРЕДЕЛЕНИИ ПАРАМЕТРОВ
В практических задачах априорная трудность распространяется как на распределение вероятностей данных наблюдения
так и на распределение
При этом незнание либо весьма ограниченные сведения об априорном распределении
особенно типичны. Рассмотрим поэтому сначала некоторые характерные ситуации, связанные с ограниченной априорной информацией о параметрах
1. Самой крайней ситуацией является случай, когда относительной вообще ничего неизвестно, кроме, возможно, области
допустимых значений X и той информации, которая содержится в данных наблюдения х, используемых непосредственно при принятии решения. Это означает, что априорное распределение
вообще неизвестно и может быть любой неотрицательной функцией, подчиненной единственному условию лормировки
Несмотря на такую крайность, задача синтеза оптимальной системы имеет смысл и соответствующие методы будут рассмотрены ниже.
2. Близкая по смыслу ситуация, но существенно более выгодная с точки зрения качества синтезируемой системы (или качества принимаемого решения) имеет место, когда параметр
имеет векторный характер, но его компоненты связаны с помощью некоторых функциональных ограничений. Эти ограничения всегда можно привести к виду
где
компонента
некоторый векторный параметр меньшей чем
размерности,
Классическим примером подобного ограниченного описания является задача фильтрации — оценки функции времени (в данном случае рассматриваемой в дискретные моменты), заданной с точностью до некоторого числа неизвестных параметров
В этом примере
— значения оцениваемой функции,
ее функциональное описание в момент зависящее от
параметры а неизменны для всех интересующих нас значений v.
Наиболее распространенным является полиномиальное описание, для которого
или более общее линейное описание относительно параметров а
При наличии ограничений (3.1.1) функция потерь (по второму своему аргументу)
и функция правдоподобия
зависят фактически только от а, и если о последних ничего неизвестно, то задача получается такой же, как в 1 за исключением понижения размерности с
до
Последнее может быть очень существенным как с точки зрения техники решения задачи синтеза и получения окончательных результатов, так и качества полученного решения.
3. Во многих практических задачах, когда распределение
неизвестно, можно считать заданными некоторые статистические характеристики
Простейшей из них является математическое ожидание самого параметра X, которое во многих случаях можно предполагать заданным. Более подробное статистическое описание достигается, если заданы дисперсия X, моменты более высокого порядка и т. д. В общем случае подобные априорные сведения могут быть описаны путем задания математического ожидания некоторой многокомпонентной функции
В итоге распределение вероятностей X получается не произвольным, аподчиненным следующим ограничениям:
где
известная многокомпонентная векторная, матричная и т. д. функция
а — заданная величина той же структуры.
Вид функции
определяется структурой множества
и имеющимися сведениями. Например, если
- компонентный вектор
и заданы математические ожидания всех компонент, то
где
— заданное математическое ожидание Если дополнительно заданы дисперсии всех компонент
то функция
имеет компоненты
(всего
компонент) а величина а соответственно
для
где
заданная дисперсия
Аналогичная картина имеет место и при задании других статистических характеристик.
Как с практической, так и с теоретической точки зрения большое значение имеет специальный случай, когда задана корреляционная матрица
вектора X (для простоты его математическое ожидание считается равным нулю), т. е.
4. Следующим возможным способом ограниченного априорного описания
-мерного вектора параметров
является задание
распределений вероятности низшего порядка, например совокупности одномерных плотностей вероятности
для всех или части
совокупности условных плотностей
для
Предположение о независимости в первом случае или о марковском свойстве во втором совместно с заданием указанных характеристик дает полное статистическое описание I, но если даже такие предположения не имеют оснований, то все равно задание частных распределений вероятности дает богатую информацию для решения задач синтеза оптимальных систем.
5. В п. 2—4 предполагалось задание некоторых аналитических, количественных свойств априорного распределения вероятности X, соответствующих наличию априорной неопределенности и дающих неполное статистическое описание. Пожалуй, большее значение имеют те ограниченные априорные сведения, которые относятся к качественному описанию свойств распределения вероятности параметров
Например, весьма ценной является априорная информация о том, что различные компоненты
этой совокупности независимы (частные плотности
при этом неизвестны) или еще к тому же распределены одинаково, т. е.
при полностью или частично неизвестной функции
При решении задач синтеза в условиях априорной неопределенности равенство типа (3.1.6) может рассматриваться как гипотетическое и подлежащее проверке на соответствие с данными х, полученными при наблюдении. Особое значение в практических задачах имеет априорное предположение о том, что компоненты вектора
образуют марковский случайный процесс, т. е.
где переходная
изначальная
плотности вероятности могут быть полностью и частично неизвестны. Важность этого случая обусловлена его большой универсальностью, связанной с тем, что при надлежащем выборе размерности каждой из компонент
которая, в свою очередь, может быть вектором, модель (3.1.7) удовлетворительно описывает большинство интересующих практику случаев.
Общей чертой рассмотренных выше примеров является то, что в условиях априорной неопределенности вместо единственного распределения вероятности для параметров X с плотностью
можно задать только класс таких распределений к которому относятся все возможные в данной задаче распределения о). Такой класс является исходным описанием задачи и характеризует априорнхю неопределенность, тем большую, чем шире задаваемый класс. Так в «чисто» байесовом случае
полностью известна) класс состоит всего из одного элемента, при полном отсутствии сведений об априорном описании параметров
(случай 1)
— класс всех возможных распределений вероятности. В случае 2 класс
— это совокупность всех распределений
в
-мерном пространстве, полностью сосредоточенных на гиперповерхностях, определяемых соотношениями (3.1.1), и приписывающих нулевую вероятностную меру остальной части пространства и т. д.
Четкое определение класса возможных распределений о, соответствующего имеющимся априорным сведениям, имеет, как мы убедимся позднее, довольно существенное значение при решении задач синтеза в условиях априорной неопределенности.