Пред.
След.
Макеты страниц
Распознанный текст, спецсимволы и формулы могут содержать ошибки, поэтому с корректным вариантом рекомендуем ознакомиться на отсканированных изображениях учебника выше Также, советуем воспользоваться поиском по сайту, мы уверены, что вы сможете найти больше информации по нужной Вам тематике 1.4. ОСНОВНЫЕ ПОЛОЖЕНИЯ ТЕОРИИ СТАТИСТИЧЕСКИХ ОЦЕНОКВ теории статистических оценок различают два вида правил выбора решения: неслучайные (нерандомизированные) и случайные (рандомизированные). Для неслучайного правила выбора решения (оценки) по каждой конкретной реализации принятых данных Для случайного правила выбора решения по каждой конкретной реализации Из-за случайного характера наблюдаемой реализации при любом правиле выбора решения неизбежны ошибки в том смысле, что принятое решение у (оценка) не совпадает с истинным значением параметра Физический смысл функции потерь состоит в том, что каждой возможной ошибке приписывается определенный неотрицательный вес. При этом в зависимости от целей, для которых находится оценка, наименее желательным ошибкам приписываются наибольшие веса. Выбор той или иной функции потерь производится в зависимости от конкретной специфики задачи, для которой находится оценка, и выходит за рамки теории статистических решений. К сожалению, не существует общего формального правила выбора функции потерь, и он в той или иной степени является субъективным. Определенный произвол в выборе потерь приводит к трудностям в использовании методов теории статистических решений. Наиболее часто используются следующие функции потерь (рис. 1.4.1): а) простая
где б) «линейная» по модулю
в) квадратичная
г) прямоугольная
д) экспоненциальная (функция потерь с насыщением)
Приведенные функции потерь являются симметричными функциями
Рис. 1.4.1. Функция потерь: а — простая; Примером несимметричной функции потерь может служить так называемая информационная: функция потерь внда
Здесь — условная плотность вероятности параметра если принята оценка (решение) у. Следует, однако, отметить, что в частном случае и эта функция потерь может быть симметричной, если, например, условная плотность вероятности описывается гауссовой кривой или какой-либо другой четной функцией относительно некоторой фиксированной точки Функцию потерь (1.4.6) можно интерпретировать как меру неопределенности относительно параметра I, если известна опенка у. Неопределенность понимается в смысле, принятом в теории информации [20, 27]. Функция потерь (1.4.6) в отличие от (1.4.1) -(1.4.5) зависит не только от оценки у и значения параметра В силу случайного характера оценок у и параметра I потери при любом правиле выбора решения Являются случайными и не могут быть использованы для характеристики качества оценки (правила выбора решения). Для характеристики качества оценки можно принять среднее значение функции потерь, которое будет учитывать все возможные типы поведения системы оценки, все виды ошибок и относительную частоту их появления. Выбор для характеристики качества оценки среднего значения (а не другой статистической характеристики) функции потерь является хотя и произвольным, но рациональным. Среднее значение (условное или безусловное) функции потерь называется риском (условным или безусловным). Условный риск получается путем усреднения функций потерь по всевозможным значениям многомерной выборки наблюдаемых данных, характеризуемой условной плотностью вероятности
Из этого выражения и определения функции потерь следует, что более предпочтительными оценками будут те оценки, при которых условный риск минимален. Однако при разных значениях оцениваемого параметра I условный риск будет иметь различные значения. Поэтому могут быть различными наиболее предпочтительные решающие правила (оценки). Значит если известно априорное распределение значений оцениваемого параметра, то наилучшее правило выбора решения (оценку) целесообразно искать исходя из условия минимума безусловного среднего риска:
где Оденки, получаемые
Здесь усреднение выполняется по выборкам (при дискретной обработке) наблюдаемых данных X или по реализациям (при непрерывной обработке) Безусловный средний риск (1.4.8) может быть вычислен для любого заданного правила выбора решения (оценки), причем в силу определения байесовской оценки всегда выполняется условие
Вычисляя средний риск (1.4.8) для различных оценок и сравнивая эти рискн между собой и байесовским риском, можно суднть, насколько одна оценка лучше другой и насколько какая-либо оценка близка к оптимальной (байесовской) оценке. Та к как сам риск (условный или безусловный) имеет различный физический смысл в зависимости от вида и физической интерпретации функции потерь Поскольку плотность вероятности
называемой апостериорным риском, при фиксированной выборке (реализации) наблюдаемых данных. Если апостериорный риск дифференцируем по у, то байесовская оценка
При этом следует брать корень уравнения, обеспечивающий глобальный минимум (минимум миниморум) апостериорного риска. Критерий минимума среднего риска основаи на использовании полной априорной информации об оцениваемом параметре, т. е. дает ответ на вопрос, каким образом надо использовать всю априорную информацию, чтобы получить наилучшую оценку, Однако отсутствие полной априорной информации об оцениваемом параметре, которое имеет место в ряде прикладных задач, приводит к определенным трудностям (априорные трудности) в применении методов теории статистических решений. Известно несколько подходов к решению задачи нахождения оптимальных оценок при неизвестном априорном распределении оцениваемого параметра. Один из них заключается в отыскании байесовских оценок, инвариантных по отношению к достаточно широкому классу априорных распределений, В других случаях либо ограничиваются выбором оценки на основе минимизации условного риска, либо делают какие-либо предположения относительно априорного распределения оцениваемого параметра. Если в качестве априорного распределения оцениваемого параметра взяю наименее предпочтительное распределение, при котором байесовский риск будет максимален, то получаемая оценка параметра сигнала называется минимаксной. Минимаксная оценка дает оптимальное решение только для самого наихудшего случая и определяет верхнюю границу байесовского рска, которую называют минимаксным риском, Хотя минимаксная оценка может приводить к большим потерям, чем другая оценка, она может быть полезной, если желательно застраховаться от потерь за счет оценивания в наиболее неблагоприятных априорных условиях. В соответствии с определением минимаксная оценка может быть найдена следующим образом. Для произвольного априорного распределения в соответствии с заданной функцией потерь ищется байесовская оценка Следует отметить, что строгое нахождение наименее предпочтительного априорного распределения сопряжено с большими математическими трудностями. Однако в большом числе прикладных задач, в том числе в задачах оценки параметров сигналов при наличии помех, наименее предпочтительным распределением является равномерное (в заданном интервале) распределение.
|
1 |
Оглавление
|