Из Википедии, бесплатной энциклопедии
Перейти к навигации Перейти к поиску

Взвешенное среднее арифметическое аналогична обычной среднее арифметическое (наиболее распространенный тип в среднем ), за исключением того, что вместо каждой из точек данных , способствующих в равной степени к финалу среднем, некоторые точки данных способствуют больше , чем другие. Понятие взвешенного среднего играет роль в описательной статистике, а также встречается в более общей форме в некоторых других областях математики.

Если все веса равны, то средневзвешенное значение совпадает со средним арифметическим . Хотя взвешенные средние обычно ведут себя аналогично средним арифметическим, у них действительно есть несколько нелогичных свойств, как, например, зафиксировано в парадоксе Симпсона .

Примеры [ править ]

Базовый пример [ править ]

Учитывая два школьных класса, один с 20 учениками и один с 30 учениками, оценки в каждом классе по тесту были:

Утреннее занятие = 62, 67, 71, 74, 76, 77, 78, 79, 79, 80, 80, 81, 81, 82, 83, 84, 86, 89, 93, 98
Дневной класс = 81, 82, 83, 84, 85, 86, 87, 87, 88, 88, 89, 89, 89, 90, 90, 90, 90, 91, 91, 91, 92, 92, 93, 93 , 94, 95, 96, 97, 98, 99

Среднее значение для утреннего класса составляет 80, а для дневного класса - 90. Невзвешенное среднее значение двух средних составляет 85. Однако это не учитывает разницу в количестве учеников в каждом классе (20 против 30); следовательно, значение 85 не отражает среднюю оценку учащегося (независимо от класса). Среднюю оценку студента можно получить путем усреднения всех оценок без учета классов (сложите все оценки и разделите на общее количество студентов):

Или это может быть достигнуто путем взвешивания средних значений класса по количеству учеников в каждом классе. Большему классу придается больший «вес»:

Таким образом, взвешенное среднее позволяет найти среднюю среднюю оценку учащегося, не зная оценки каждого учащегося. Требуются только средства класса и количество учеников в каждом классе.

Пример выпуклой комбинации [ править ]

Поскольку важны только относительные веса, любое средневзвешенное значение может быть выражено с помощью коэффициентов, сумма которых равна единице. Такая линейная комбинация называется выпуклой комбинацией .

Используя предыдущий пример, мы получили бы следующие веса:

Затем примените такие веса:

Математическое определение [ править ]

Формально взвешенное среднее непустого конечного мультимножества данных с соответствующими неотрицательными весами равно

который расширяется до:

Следовательно, элементы данных с большим весом вносят больший вклад в средневзвешенное значение, чем элементы с низким весом. Вес не может быть отрицательным. Некоторые из них могут быть равны нулю, но не все (так как деление на ноль недопустимо).

Формулы упрощаются, если веса нормализованы таким образом, что они в сумме составляют , то есть:

.

Тогда для таких нормированных весов средневзвешенное значение будет:

.

Обратите внимание, что всегда можно нормализовать веса, сделав следующее преобразование исходных весов:

.

Использование нормализованного веса дает те же результаты, что и при использовании исходных весов:

Обычный средний частный случай взвешенного среднего , где все данные имеют равные веса.

Стандартная ошибка среднего взвешенного (блок ввода отклонений) , можно показать с помощью распространения неопределенности быть:

Статистические свойства [ править ]

Взвешенное значение выборки, само по себе является случайной величиной. Его ожидаемое значение и стандартное отклонение связаны с ожидаемыми значениями и стандартными отклонениями наблюдений следующим образом. Для простоты мы предполагаем нормализованные веса (веса, суммирующие единицу).

Если наблюдения имеют ожидаемые значения

тогда средневзвешенное значение выборки имеет ожидание

В частности, если средние равны, то математическое ожидание средневзвешенного выборочного среднего будет этим значением,

Для некоррелированных наблюдений с дисперсиями дисперсия средневзвешенного значения выборки [ необходима ссылка ]

квадратный корень которого можно назвать стандартной ошибкой средневзвешенного значения (общий случай) . [ необходима цитата ]

Следовательно, если все наблюдения имеют одинаковую дисперсию, средневзвешенное значение выборки будет иметь дисперсию

где . Дисперсия достигает максимального значения, когда все веса, кроме одного, равны нулю. Его минимальное значение находится, когда все веса равны (т. Е. Невзвешенное среднее), и в этом случае мы имеем , т. Е. Оно вырождается в стандартную ошибку среднего , возведенного в квадрат.

Обратите внимание, что, поскольку ненормализованные веса всегда можно преобразовать в нормализованные веса, все формулы в этом разделе можно адаптировать к ненормализованным весам, заменив all .

Веса дисперсии [ править ]

Для средневзвешенного значения списка данных, для которого каждый элемент потенциально происходит из другого распределения вероятностей с известной дисперсией , один из возможных вариантов весов задается обратной величиной дисперсии:

Средневзвешенное значение в этом случае:

а стандартная ошибка средневзвешенного значения (с весами дисперсии) составляет:

Обратите внимание, что это сводится к тому, когда все . Это частный случай общей формулы из предыдущего раздела,

Приведенные выше уравнения можно объединить, чтобы получить:

Значение этого выбора состоит в том, что это взвешенное среднее является оценкой максимального правдоподобия среднего значения распределений вероятностей в предположении, что они независимы и нормально распределены с одним и тем же средним значением.

Исправление чрезмерной или недостаточной дисперсии [ править ]

Взвешенные средние обычно используются для нахождения средневзвешенного значения исторических данных, а не теоретически сгенерированных данных. В этом случае будет некоторая ошибка в дисперсии каждой точки данных. Обычно экспериментальные ошибки могут быть недооценены из-за того, что экспериментатор не принимает во внимание все источники ошибок при вычислении дисперсии каждой точки данных. В этом случае необходимо скорректировать дисперсию средневзвешенного значения, чтобы учесть тот факт, что оно слишком велико. Исправление, которое необходимо сделать, это

где это уменьшенный хи-квадрат :

Квадратный корень можно назвать стандартной ошибкой взвешенного среднего (веса дисперсии, скорректированный масштаб) .

Когда все дисперсии данных равны, они компенсируются средневзвешенной дисперсией, которая снова сводится к стандартной ошибке среднего (в квадрате) , сформулированной в терминах стандартного отклонения выборки (в квадрате),

Проверка загрузки [ править ]

Методами начальной загрузки было показано, что следующая точная оценка квадрата стандартной ошибки среднего (общий случай): [1]

где . Дальнейшее упрощение приводит к

Взвешенная дисперсия выборки [ править ]

Обычно при вычислении среднего значения важно знать дисперсию и стандартное отклонение этого среднего значения. Когда используется взвешенное среднее , дисперсия взвешенной выборки отличается от дисперсии невзвешенной выборки.

Смещен взвешенная дисперсия выборки определяются аналогично обычной необъективной выборочной дисперсия :

где , что соответствует нормированным весам. Если веса являются частотными весами (и, следовательно, являются случайными величинами), можно показать, что это оценка максимального правдоподобия для iid гауссовских наблюдений.

Для небольших выборок обычно используется несмещенная оценка дисперсии генеральной совокупности. В нормальных невзвешенных выборках N в знаменателе (соответствующем размеру выборки) изменяется на N  - 1 (см. Поправку Бесселя ). В настройке с взвешиванием на самом деле есть два разных несмещенных оценщика, один для случая частотных весов, а другой - для случая весов надежности .

Веса частоты [ править ]

Если веса являются частотными весами (где вес равен количеству вхождений), то несмещенная оценка:

Это эффективно применяет поправку Бесселя для частотных весов.

Например, если значения взяты из одного и того же распределения, то мы можем рассматривать этот набор как невзвешенную выборку или мы можем рассматривать его как взвешенную выборку с соответствующими весами , и в любом случае мы получим тот же результат.

Если частотные веса нормализованы к 1, то правильное выражение после поправки Бесселя станет

где общее количество образцов равно (не ). В любом случае информация об общем количестве отсчетов необходима для получения несмещенной поправки, даже если она имеет иное значение, чем частотный вес.

Обратите внимание, что оценщик может быть несмещенным только в том случае, если веса не стандартизированы и не нормализованы , эти процессы изменяют среднее значение и дисперсию данных и, таким образом, приводят к потере базовой скорости (подсчет населения, который является требованием для коррекции Бесселя).

Веса надежности [ править ]

Если веса не случайны ( веса надежности [ необходимо определение ] ), мы можем определить поправочный коэффициент, чтобы получить несмещенную оценку. Предполагая, что каждая случайная переменная выбирается из одного и того же распределения со средней и фактической дисперсией , принимая наши ожидания,

где . Следовательно, смещение в нашей оценке аналогично смещению в невзвешенной оценке (также обратите внимание, что это эффективный размер выборки ). Это означает, что для получения несмещенной оценки нам необходимо предварительно разделить на , гарантируя, что ожидаемое значение оцененной дисперсии равно фактической дисперсии выборочного распределения.

Окончательная объективная оценка дисперсии выборки:

, [2]

где .

Степени свободы взвешенной несмещенной дисперсии выборки соответственно изменяются от N  - 1 до 0.

Стандартное отклонение - это просто квадратный корень из приведенной выше дисперсии.

В качестве примечания, были описаны другие подходы для вычисления взвешенной дисперсии выборки. [3]

Ковариация взвешенной выборки [ править ]

Во взвешенной выборке каждому вектору-строке (каждому набору отдельных наблюдений по каждой из K случайных величин) присваивается вес .

Тогда вектор взвешенного среднего определяется как

Матрица взвешенной ковариации имеет следующий вид: [4]

Как и в случае взвешенной выборочной дисперсии, существуют две разные несмещенные оценки в зависимости от типа весов.

Веса частоты [ править ]

Если веса являются частотными весами , несмещенная взвешенная оценка ковариационной матрицы с поправкой Бесселя дается следующим образом: [4]

Обратите внимание, что эта оценка может быть несмещенной только в том случае, если веса не стандартизированы и не нормализованы , эти процессы изменяют среднее значение и дисперсию данных и, таким образом, приводят к потере базовой скорости (подсчет населения, который является требованием для поправки Бесселя).

Веса надежности [ править ]

В случае весов надежности , гири нормированы :

(Если это не так, разделите веса на их сумму для нормализации перед вычислением :

Тогда вектор взвешенного среднего можно упростить до

а несмещенная взвешенная оценка ковариационной матрицы : [5]

Рассуждения здесь те же, что и в предыдущем разделе.

Поскольку мы предполагаем, что веса нормализованы, это сводится к следующему:

Если все веса одинаковы, т. Е. Тогда взвешенное среднее и ковариация сводятся к невзвешенному выборочному среднему и ковариации, указанным выше.

Векторные оценки [ править ]

Сказанное легко обобщается на случай усреднения векторных оценок. Например, оценки местоположения на плоскости могут иметь меньшую уверенность в одном направлении, чем в другом. Как и в скалярном случае, средневзвешенное значение нескольких оценок может обеспечить оценку максимального правдоподобия . Мы просто заменить дисперсию со стороны матрицей ковариации и арифметическими обратным по матрице , обратной (оба обозначены таким же образом, с помощью надиндексов); матрица весов будет выглядеть так: [6]

Средневзвешенное значение в этом случае:

(где порядок произведения матрица-вектор не коммутативен ) в терминах ковариации взвешенного среднего:

Например, рассмотрим средневзвешенное значение точки [1 0] с высокой дисперсией во втором компоненте и [0 1] с высокой дисперсией в первом компоненте. потом

тогда средневзвешенное значение:

что имеет смысл: оценка [1 0] "совместима" во втором компоненте, а оценка [0 1] согласована в первом компоненте, поэтому взвешенное среднее почти равно [1 1].

Учет корреляций [ править ]

В общем случае предположим, что , - это ковариационная матрица, связывающая количества , - это общее среднее значение, которое необходимо оценить, и это матрица плана, равная вектору единиц (длины ). Теорема Гаусса – Маркова утверждает, что оценка среднего с минимальной дисперсией определяется по формуле:

и

куда:

Снижение силы взаимодействия [ править ]

Рассмотрим временной ряд независимой переменной и зависимой переменной с выборкой наблюдений в дискретные моменты времени . Во многих распространенных ситуациях значение во времени зависит не только от его прошлых значений, но и от него. Обычно сила этой зависимости уменьшается с увеличением разнесения наблюдений во времени. Чтобы смоделировать эту ситуацию, можно заменить независимую переменную ее скользящим средним для размера окна .

Экспоненциально убывающие веса [ править ]

В сценарии, описанном в предыдущем разделе, чаще всего уменьшение силы взаимодействия подчиняется отрицательному экспоненциальному закону. Если наблюдения производятся через эквидистантные моменты времени, то экспоненциальное уменьшение эквивалентно уменьшению на постоянную долю на каждом временном шаге. Установив, мы можем определить нормализованные веса с помощью

где - сумма ненормированных весов. В этом случае просто

подходит для больших значений .

Константа затухания должна соответствовать фактическому снижению силы взаимодействия. Если это не может быть определено из теоретических соображений, то следующие свойства экспоненциально убывающих весов полезны для принятия подходящего выбора: на шаге вес приблизительно равен , площадь хвоста - значение , площадь головы . Хвостовая зона у шага есть . Если в первую очередь важны самые близкие наблюдения, а влияние остальных наблюдений можно безопасно игнорировать, тогда выбирайте так , чтобы площадь хвоста была достаточно маленькой.

Средневзвешенные функции [ править ]

Понятие средневзвешенного значения можно распространить на функции. [7] Средневзвешенные функции играют важную роль в системах взвешенного дифференциального и интегрального исчисления. [8]

См. Также [ править ]

  • Средний
  • Основная тенденция
  • Иметь в виду
  • Стандартное отклонение
  • Сводные статистические данные
  • Весовая функция
  • Средневзвешенная стоимость капитала
  • Среднее геометрическое взвешенное
  • Взвешенное гармоническое среднее
  • Взвешенный метод наименьших квадратов
  • Взвешенная медиана
  • Взвешивание
  • Стандартная ошибка оценки доли при использовании взвешенных данных

Ссылки [ править ]

  1. ^ Гац, Дональд Ф .; Смит, Лютер (июнь 1995 г.). «Стандартная ошибка средневзвешенной концентрации - I. Самозагрузка по сравнению с другими методами». Атмосферная среда . 29 (11): 1185–1193. DOI : 10.1016 / 1352-2310 (94) 00210-C .
  2. ^ «Научная библиотека GNU - Справочное руководство: взвешенные образцы» . Gnu.org . Проверено 22 декабря 2017 года .
  3. ^ «Взвешенная стандартная ошибка и ее влияние на тестирование значимости (WinCross против Quantum и SPSS), доктор Альберт Маданский» (PDF) . Analyticalgroup.com . Проверено 22 декабря 2017 года .
  4. ^ a b Прайс, Джордж Р. (апрель 1972 г.). «Расширение математики ковариационного отбора» (PDF) . Анналы генетики человека . 35 (4): 485–490. DOI : 10.1111 / j.1469-1809.1957.tb01874.x .
  5. Марк Галасси, Джим Дэвис, Джеймс Тейлер, Брайан Гоф, Джерард Юнгман, Майкл Бут и Фабрис Росси. Научная библиотека GNU - Справочное руководство, версия 1.15 , 2011 г. Разд. 21.7 Взвешенные образцы
  6. ^ Джеймс, Фредерик (2006). Статистические методы в экспериментальной физике (2-е изд.). Сингапур: World Scientific. п. 324. ISBN 981-270-527-9.
  7. GH Харди, Дж. Э. Литтлвуд и Г. Полиа. Неравенства (2-е изд.), Cambridge University Press, ISBN 978-0-521-35880-4 , 1988. 
  8. ^ Джейн Гроссман, Майкл Гроссман, Роберт Кац. Первые системы взвешенного дифференциального и интегрального исчисления , ISBN 0-9771170-1-4 , 1980. 

Дальнейшее чтение [ править ]

  • Бевингтон, Филип Р. (1969). Обработка данных и анализ ошибок для физических наук . Нью-Йорк, штат Нью-Йорк: Макгроу-Хилл. OCLC  300283069 .
  • Струтц, Т. (2010). Подгонка данных и неопределенность (практическое введение в взвешенный метод наименьших квадратов и другие аспекты) . Vieweg + Teubner. ISBN 978-3-8348-1022-9.

Внешние ссылки [ править ]

  • Дэвид Терр. «Средневзвешенное значение» . MathWorld .