Из Википедии, бесплатной энциклопедии
Перейти к навигации Перейти к поиску

В теории вероятностей , к ожидаемой величине из более случайной величины , обозначать или , [1] [2] является обобщением средневзвешенного , и является интуитивно средним арифметическим из большого числа независимых реализаций в . Ожидаемое значение также называется ожиданием , математическим ожиданием , средним , средним или первым моментом . Ожидаемая стоимость - ключевое понятие в экономике , финансах и многих других предметах.

По определению, ожидаемое значение постоянной случайной величины равно . [3] Ожидаемое значение случайной величины с равновероятными исходами определяется как среднее арифметическое значений условий. Если некоторые из вероятностей отдельного результата не равны, то ожидаемое значение определяется как средневзвешенное значение s. , то есть сумма произведений . [4] Ожидаемое значение общей случайной величины включает интегрирование в смысле Лебега .

История [ править ]

Идея математического ожидания возникла в середине 17 века в результате изучения так называемой проблемы очков , которая направлена ​​на справедливое разделение ставок между двумя игроками, которые должны закончить свою игру, прежде чем она будет должным образом. законченный. [5] Эта проблема обсуждалась веками, и за эти годы было предложено множество противоречивых предложений и решений, когда она была поставлена Блезу Паскалю французским писателем и математиком-любителем Шевалье де Мере.в 1654 году. Мере утверждал, что эту проблему невозможно решить и что она показала, насколько несовершенной была математика, когда дело доходило до ее применения в реальном мире. Паскаль, будучи математиком, был спровоцирован и полон решимости решить проблему раз и навсегда.

Он начал обсуждать проблему в уже известной серии писем Пьеру де Ферма . Вскоре они оба независимо друг от друга придумали решение. Они решили проблему разными вычислительными способами, но их результаты были идентичны, потому что их вычисления были основаны на одном и том же фундаментальном принципе. Принцип состоит в том, что стоимость будущей прибыли должна быть прямо пропорциональна шансам на ее получение. Этот принцип казался им обоим естественным. Они были очень довольны тем фактом, что они нашли по существу такое же решение, и это, в свою очередь, сделало их абсолютно убежденными в том, что они решили проблему окончательно; однако они не опубликовали свои выводы. Они сообщили об этом лишь небольшому кругу общих научных друзей в Париже. [6]

Три года спустя, в 1657 году, голландский математик Христиан Гюйгенс , только что посетивший Париж, опубликовал трактат (см. Гюйгенс (1657) ) « De ratiociniis in ludo ale » по теории вероятностей. В этой книге он рассмотрел проблему точек и представил решение, основанное на том же принципе, что и решения Паскаля и Ферма. Гюйгенс также расширил концепцию ожидания, добавив правила расчета ожиданий в более сложных ситуациях, чем исходная задача (например, для трех или более игроков). В этом смысле эту книгу можно рассматривать как первую успешную попытку заложить основы теории вероятностей .

В предисловии к своей книге Гюйгенс писал:

Следует также сказать, что в течение некоторого времени некоторые из лучших математиков Франции занимались этим видом исчисления, так что никто не должен приписывать мне честь первого изобретения. Это не принадлежит мне. Но эти ученые, хотя и подвергали друг друга испытанию, предлагая друг другу множество трудных для решения вопросов, скрыли свои методы. Поэтому мне пришлось исследовать и глубоко изучить этот вопрос, начиная с элементов, и по этой причине я не могу утверждать, что я даже начал с того же принципа. Но в конце концов я обнаружил, что мои ответы во многих случаях не отличаются от их.

-  Эдвардс (2002)

Так, Гюйгенс узнал о проблеме де Мере в 1655 г. во время своего визита во Францию; позже, в 1656 г. из его переписки с Каркави, он узнал, что его метод по сути такой же, как и у Паскаля; так что еще до того, как его книга поступила в печать в 1657 году, он знал о приоритете Паскаля в этом вопросе.

Этимология [ править ]

Ни Паскаль, ни Гюйгенс не использовали термин «ожидание» в его современном смысле. В частности, Гюйгенс пишет: [7]

Что любой шанс или ожидание выиграть какую-либо вещь стоит именно такой суммы, которую вы бы добыли за тот же шанс и ожидание при честной игре. ... Если я ожидаю a или b и имею равные шансы получить их, мое ожидание стоит (a + b) / 2.

Более чем через сто лет, в 1814 году, Пьер-Симон Лаплас опубликовал свой трактат « Аналитическая теория вероятностей », в котором понятие ожидаемой стоимости было определено явно: [8]

… Это преимущество в теории случайностей является произведением ожидаемой суммы на вероятность ее получения; это частичная сумма, которая должна быть получена, если мы не хотим рисковать событием, предполагая, что деление производится пропорционально вероятностям. Это разделение является единственно справедливым, когда устранены все странные обстоятельства; потому что равная степень вероятности дает равное право на получение ожидаемой суммы. Мы будем называть это преимущество математической надеждой .

Обозначения [ править ]

Использование буквы для обозначения ожидаемого значения восходит к У. А. Уитворту в 1901 году. [9] С тех пор этот символ стал популярным среди английских писателей. На немецком языке это означает «Erwartungswert», на испанском - «Esperanza matemática», а на французском - «Espérance mathématique». [10]

Еще одно популярное обозначение - тогда как обычно используется в физике и в русскоязычной литературе.

Определение [ править ]

Конечный регистр [ править ]

Позвольте быть случайной величиной с конечным числом конечных результатов, происходящих с вероятностями соответственно. Ожидания от определяется как

[4]

Так как ожидаемое значение является взвешенной суммой из значений, с вероятностями как весы.

Если все исходы являются равновероятными (то есть ), то средневзвешенные превращается в простой средней . С другой стороны, если результаты не равновероятны, тогда простое среднее значение необходимо заменить средневзвешенным, которое учитывает тот факт, что некоторые исходы более вероятны, чем другие.

Иллюстрация сходимости средних значений последовательности бросков кубика к ожидаемому значению 3,5 по мере роста числа бросков (попыток).

Примеры [ править ]

  • Пусть представляют собой результат рулона ярмарки шестистороннего умирают . Точнее, количество пипсов, отображаемых на верхней грани кубика после подбрасывания. Возможные значения : 1, 2, 3, 4, 5 и 6, все из которых одинаково вероятны с вероятностью1/6. Ожидание IS
Если бросить кубик и вычислить среднее ( среднее арифметическое ) результатов, то по мере роста среднее почти наверняка сходится к ожидаемому значению, факт, известный как строгий закон больших чисел .
  • Игра в рулетку состоит из маленького шарика и колеса с 38 пронумерованными лузами по краю. Когда колесо вращается, шарик хаотично раскачивается, пока не окажется в одном из карманов. Предположим, что случайная величина представляет собой (денежный) результат ставки в 1 доллар на одно число (ставка «прямо вверх»). Если ставка выиграет (что с вероятностью1/38в американской рулетке) выигрыш - 35 долларов; в противном случае игрок теряет ставку. Ожидаемая прибыль от такой ставки составит
То есть ставка в 1 доллар проиграет , поэтому ее ожидаемое значение равно

Счетно бесконечный регистр [ править ]

Интуитивно ожидание случайной величины, принимающей значения в счетном наборе результатов, определяется аналогично как взвешенная сумма значений результатов, где веса соответствуют вероятностям реализации этого значения. Однако проблемы сходимости, связанные с бесконечной суммой, требуют более тщательного определения. Строгое определение сначала определяет математическое ожидание неотрицательной случайной величины, а затем адаптирует его к общим случайным величинам.

Позвольте быть неотрицательной случайной величиной со счетным набором результатов, происходящих с вероятностями соответственно. По аналогии с дискретным случаем, математическое ожидание определяется как ряд

Обратите внимание, что, поскольку бесконечная сумма определена правильно и не зависит от порядка, в котором она вычисляется. В отличие от конечного случая, здесь математическое ожидание может быть равно бесконечности, если указанная выше бесконечная сумма неограниченно увеличивается.

Для общей (не обязательно неотрицательной) случайной величины со счетным числом результатов установите и . По определению,

Как и в случае неотрицательных случайных величин , опять же, может быть конечным или бесконечным. Третий вариант здесь вообще не гарантирует, что он будет четко определен. Последнее случается всякий раз .

Примеры [ править ]

  • Предположим, что и для , где ( являясь натуральным логарифмом ) - масштабный коэффициент такой, что сумма вероятностей равна 1. Тогда, используя прямое определение неотрицательных случайных величин, мы имеем
  • Пример бесконечного ожидания возникает в контексте петербургского парадокса . Пусть и для . Еще раз, поскольку случайная величина неотрицательна, расчет ожидаемого значения дает
  • В качестве примера, где математическое ожидание не определено четко, предположим, что случайная величина принимает значения с соответствующими вероятностями , ..., где - нормализующая константа, которая обеспечивает суммирование вероятностей до единицы.
Затем следует, что принимает значение с вероятностью для и принимает значение с оставшейся вероятностью. Точно так же принимает значение с вероятностью для и принимает значение с оставшейся вероятностью. Используя определение неотрицательных случайных величин, можно показать, что и и (см. Гармонический ряд ). Следовательно, ожидание не является четко определенным.

Абсолютно непрерывный случай [ править ]

Если случайная величина с функцией плотности вероятности из , то ожидаемое значение определяется как интеграл Лебега

где значения с обеих сторон хорошо определены или не определены одновременно.

Пример. Случайная величина, имеющая распределение Коши [11], имеет функцию плотности, но ожидаемое значение не определено, так как распределение имеет большие «хвосты» .

Общий случай [ править ]

В общем, если - случайная величина, определенная в вероятностном пространстве , то ожидаемое значение , обозначенное как , определяется как интеграл Лебега

Для многомерных случайных величин их ожидаемое значение определяется для каждого компонента. То есть,

и для случайной матрицы с элементами ,

Основные свойства [ править ]

Приведенные ниже основные свойства (и их названия выделены жирным шрифтом) воспроизводят или непосредственно следуют из свойств интеграла Лебега . Обратите внимание, что буквы «as» означают « почти наверняка » - центральное свойство интеграла Лебега. По сути, говорят, что неравенство вроде почти наверняка верно, когда мера вероятности приписывает нулевую массу дополнительному событию .

  • Для общей случайной величины определите, как и раньше, и и обратите внимание, что с обоими и неотрицательными значениями:
  • Пусть обозначим индикаторную функцию в качестве события , то
  • Формулы в терминах CDF: если - кумулятивная функция распределения вероятностной меры и - случайная величина, то
где значения на обеих сторонах хорошо определены или не определены одновременно, а интеграл взят в смысле Лебега-Стилтьеса . Вот расширенная реальная линия.
Кроме того,
с интегралами, взятыми по Лебегу.
Доказательство второй формулы следует.
  • Неотрицательность: Если (как), то .
  • Линейность ожидания: [3] Оператор математического ожидания (или оператор ожидания ) является линейным в том смысле, что для любых случайных величин и , и константы ,
всякий раз, когда правая часть определена корректно. Это означает, что ожидаемое значение суммы любого конечного числа случайных величин является суммой ожидаемых значений отдельных случайных величин, а ожидаемое значение линейно масштабируется с мультипликативной константой.
  • Монотонность: Если (как) и то и другое и существуют, то .
Доказательство следует из линейности и свойства неотрицательности для , поскольку (as).
  • Отсутствие мультипликативности: в целом ожидаемое значение не является мультипликативным, т.е. не обязательно равно . Если и являются независимыми , то можно показать , что . Если случайные величины являются зависимыми , то обычно , хотя в особых случаях зависимости равенство может выполняться.
  • Закон бессознательного статистика : Ожидаемое значение измеримой функции,, учитываячтоимеет функцию плотности вероятности, задаются скалярным произведением ви:
[3]
Эта формула верна и в многомерном случае, когда является функцией нескольких случайных величин, а является их совместной плотностью . [3] [12]
  • Невырожденность: Если , то (как).
  • Для случайной величины с хорошо определенным ожиданием: .
  • Следующие утверждения относительно случайной величины эквивалентны:
    • существует и конечно.
    • Оба и конечно.
    • конечно.
По указанным выше причинам выражения « интегрируемый» и «ожидаемое значение конечно» используются в этой статье как синонимы.
  • Если то (как) . Аналогично, если то (как) .
  • Если и тогда
  • Если (как) , то . Другими словами, если X и Y - случайные величины, которые принимают разные значения с нулевой вероятностью, то математическое ожидание X будет равняться ожиданию Y.
  • Если (as) для некоторой константы , то . В частности, для случайной величины с четко определенным математическим ожиданием . Хорошо определенное ожидание подразумевает, что существует одно число или, скорее, одна константа, определяющая ожидаемое значение. Отсюда следует, что ожидание этой константы - это просто исходное ожидаемое значение.
  • Для неотрицательной целочисленной случайной величины

Использование и приложения [ править ]

Ожидание случайной величины играет важную роль в различных контекстах. Например, в теории принятия решений часто предполагается, что агент, делающий оптимальный выбор в контексте неполной информации, максимизирует ожидаемое значение своей функции полезности . Для другого примера, в статистике , где ищут оценки неизвестных параметров на основе доступных данных, оценка сама по себе является случайной величиной. В таких условиях желательным критерием «хорошей» оценки является ее непредвзятость ; то есть ожидаемое значение оценки равно истинному значению базового параметра.

Можно построить ожидаемое значение, равное вероятности события, взяв ожидаемое значение индикаторной функции , равное единице, если событие произошло, и нулю в противном случае. Это соотношение можно использовать для перевода свойств ожидаемых значений в свойства вероятностей, например, используя закон больших чисел для обоснования оценки вероятностей по частотам .

Ожидаемые значения степеней X называются моменты из X ; в моменты относительно среднего значения из X , как ожидается , значение степеней X - E [ X ]. Моменты некоторых случайных величин можно использовать для задания их распределений с помощью их функций, производящих моменты .

Чтобы эмпирически оценить ожидаемое значение случайной величины, нужно многократно измерять наблюдения переменной и вычислять среднее арифметическое результатов. Если ожидаемое значение существует, эта процедура оценивает истинное ожидаемое значение беспристрастным образом и имеет свойство минимизировать сумму квадратов остатков (сумма квадратов разностей между наблюдениями и оценкой ). Закон больших чисел показывает (при достаточно мягких условиях) , что, поскольку размер в образце становится больше, то дисперсия этой оценки становится все меньше.

Это свойство часто используется в самых разных приложениях, включая общие задачи статистической оценки и машинного обучения , для оценки (вероятностных) представляющих интерес величин с помощью методов Монте-Карло , поскольку большинство представляющих интерес величин можно записать в терминах математического ожидания, например : где - индикаторная функция множества .

Масса распределения вероятностей уравновешивается ожидаемым значением, здесь бета-распределение (α, β) с ожидаемым значением α / (α + β).

В классической механике , то центр масс аналогичная концепция ожидания. Например, предположим, что X - дискретная случайная величина со значениями x i и соответствующими вероятностями p i . Теперь рассмотрим невесомый стержень, на котором в точках x i вдоль стержня размещены грузы, имеющий массы p i (сумма которых равна единице). Точка балансировки стержня - E [ X ].

Ожидаемые значения также можно использовать для вычисления дисперсии с помощью формулы вычисления дисперсии.

Очень важное применение математического ожидания находится в области квантовой механики . Среднее значение квантовомеханического оператора, оперирующего вектором квантового состояния, записывается как . Неопределенность в можно вычислить по следующей формуле .

Меняя пределы и ожидания [ править ]

В общем, это не так, несмотря на точечную. Таким образом, нельзя поменять местами пределы и ожидания без дополнительных условий на случайные величины. Чтобы убедиться в этом, позвольте быть случайной величиной, равномерно распределенной на . Для определения последовательности случайных величин

с функцией индикатора события . Тогда следует, что (as). Но для каждого . Следовательно,

Аналогично, для общей последовательности случайных величин оператор ожидаемого значения не является аддитивным, т.е.

Пример легко получить, задав и для , где , как в предыдущем примере.

Ряд результатов сходимости задают точные условия, которые позволяют менять пределы и ожидания, как указано ниже.

  • Теорема о монотонной сходимости : Позвольте быть последовательность случайных величин, с (как) для каждой . Кроме того, пусть поточечно. Тогда теорема о монотонной сходимости утверждает, что
Используя теорему о монотонной сходимости, можно показать, что математическое ожидание действительно удовлетворяет счетной аддитивности для неотрицательных случайных величин. В частности, пусть быть неотрицательными случайными величинами. Из теоремы о монотонной сходимости следует, что
  • Лемма Фату : Позвольте быть последовательность неотрицательных случайных величин. Лемма Фату утверждает, что
Следствие. Пусть приютит для всех . Если (as), то
Доказательство заключается в наблюдении за этим (as) и применении леммы Фату.
  • Теорема о преобладающей сходимости : Позвольте быть последовательность случайных величин. Если поточечно (как), (как) и . Тогда согласно теореме о мажорируемой сходимости
    • ;
  • Равномерная интегрируемость : В некоторых случаях, равенство имеет место , когда последовательность является равномерно интегрируема .

Неравенства [ править ]

Существует ряд неравенств, связанных с ожидаемыми значениями функций случайных величин. Следующий список включает некоторые из наиболее простых.

  • Неравенство Маркова : для неотрицательной случайной величины и неравенство Маркова утверждает, что
  • Неравенство Биенайме-Чебышева : Позвольте быть произвольной случайной величиной с конечным ожидаемым значением и конечной дисперсией . Неравенство Bienaymé-Чебышева утверждает , что для любого действительного числа ,
  • Неравенство Йенсена : Позвольте быть выпуклой функцией Бореля и случайной величиной, такой что . потом
Правая часть определена правильно, даже если принимает не конечные значения. В самом деле, как отмечалось выше, конечность подразумевает, что конечна как; таким образом определяется как.
  • Неравенство Ляпунова: [13] Пусть . Неравенство Ляпунова утверждает, что
Доказательство. Применяя неравенство Дженсена к и , получаем . Выявление корней из каждой стороны завершает доказательство.
  • Неравенство Коши – Буняковского – Шварца : Неравенство Коши – Буняковского – Шварца утверждает, что
  • Неравенство Гельдера : Пусть и удовлетворяют условию , и . Неравенство Гёльдера утверждает, что
  • Неравенство Минковского : Позвольте быть положительное вещественное число, удовлетворяющее . Пусть, кроме того, и . Тогда согласно неравенству Минковского и

Ожидаемые значения обычных распределений [ править ]

Связь с характеристической функцией [ править ]

Функция плотности вероятности скалярной случайной величины связана с ее характеристической функцией формулой обращения:

Для ожидаемого значения (где - функция Бореля ) мы можем использовать эту формулу обращения, чтобы получить

Если конечно, меняя порядок интегрирования, получим, согласно теореме Фубини – Тонелли ,

куда

является преобразованием Фурье . Выражение для также следует непосредственно из теоремы Планшереля .

См. Также [ править ]

  • Центр массы
  • Основная тенденция
  • Неравенство Чебышева (неравенство по параметрам расположения и масштаба)
  • Условное ожидание
  • Ожидание (общий термин)
  • Ожидание (квантовая механика)
  • Закон полного ожидания -The ожидаемое значение условного ожидаемого значения X данной Y такой же , как ожидаемое значение X .
  • Момент (математика)
  • Нелинейное ожидание (обобщение математического ожидания )
  • Уравнение Вальда - уравнение для вычисления математического ожидания случайного числа случайных величин.

Ссылки [ править ]

  1. ^ «Список вероятностных и статистических символов» . Математическое хранилище . 2020-04-26 . Проверено 11 сентября 2020 .
  2. ^ «Ожидание | Среднее | Среднее» . www.probabilitycourse.com . Проверено 11 сентября 2020 .
  3. ^ a b c d Вайсштейн, Эрик У. «Ожидание» . mathworld.wolfram.com . Проверено 11 сентября 2020 .
  4. ^ a b «Ожидаемая ценность | Блестящая вики по математике и науке» . brilliant.org . Проверено 21 августа 2020 .
  5. ^ История вероятности и статистики и их приложений до 1750 года . Серия Уайли по вероятности и статистике. 1990. DOI : 10.1002 / 0471725161 . ISBN 9780471725169.
  6. ^ Ore, Oystein (1960). «Руда, Паскаль и изобретение теории вероятностей». Американский математический ежемесячник . 67 (5): 409–419. DOI : 10.2307 / 2309286 . JSTOR 2309286 . 
  7. ^ Гюйгенс, Кристиан. "Значение шансов в играх на удачу. Английский перевод" (PDF) .
  8. Лаплас, Пьер Симон, маркиз де, 1749-1827. (1952) [1951]. Философский очерк вероятностей . Dover Publications. OCLC 475539 . CS1 maint: multiple names: authors list (link)
  9. ^ Whitworth, WA (1901) Выбор и шанс с тысячей упражнений . Издание пятое. Дейтон Белл, Кембридж. [Перепечатано Hafner Publishing Co., Нью-Йорк, 1959.]
  10. ^ «Раннее использование символов в вероятности и статистике» .
  11. ^ Ричард Хэмминг (1991). «Пример 8.7–1 Распределение Коши». Искусство вероятности для ученых и инженеров . Эддисон-Уэсли. п. 290 сл . ISBN 0-201-40686-1. Выборка из распределения Коши и усреднение ни к чему не приведет - одна выборка имеет то же распределение, что и среднее из 1000 выборок!
  12. ^ Папулиса, A. (1984), вероятностные, случайные переменные, и случайные процессы , Нью - Йорк:. McGraw-Hill, стр 139-152
  13. ^ Agahi, Хамза; Мохаммадпур, Адель; Месияр, Радько (ноябрь 2015 г.). «Обобщения некоторых вероятностных неравенств и $ L ^ {p} $ сходимость случайных величин для любой монотонной меры» . Бразильский журнал вероятностей и статистики . 29 (4): 878–896. DOI : 10.1214 / 14-BJPS251 . ISSN 0103-0752 . 

Литература [ править ]

  • Эдвардс, AWF (2002). Арифметический треугольник Паскаля: история математической идеи (2-е изд.). JHU Press. ISBN 0-8018-6946-3.
  • Гюйгенс, Христиан (1657 г.). De ratiociniis in ludo aleæ (английский перевод, опубликовано в 1714 г.) .