Производящая функция вероятностей как найти

Текущая версия страницы пока не проверялась опытными участниками и может значительно отличаться от версии, проверенной 29 августа 2017 года; проверки требуют 5 правок.

В теории вероятностей, производящая функция вероятностей дискретной случайной величины представляет собой степенной ряд функции вероятности случайной величины. Производящие функции вероятностей часто используются для краткого описания их последовательности вероятностей P(X=i) для случайного величины Х, с возможностью применить теорию степенных рядов с неотрицательными коэффициентами.

Определение[править | править код]

Одномерный случай[править | править код]

Если Х является дискретной случайной величиной, принимающей неотрицательные целочисленные значения {0,1, …}, тогда производящая функция вероятностей от случайной величины Х определяется как

{displaystyle G(z)=M(z^{X})=sum _{x=0}^{infty }p(x)z^{x}}

где p – это функция вероятности от Х. Заметим, что индексы обозначения GX и pX часто используются, чтобы подчеркнуть, что они относятся к конкретной случайной величине Х и ее распределению. Степенной ряд абсолютно сходится, по крайней мере, для всех комплексных чисел z, |z| ≤ 1; во многих примерах радиус сходимости больше.,c

Многомерный случай[править | править код]

Если X = (X1,…,Xd) является дискретной случайной величиной, принимающей значения из d-мерной неотрицательной целочисленной решетки {0,1, …}d, тогда производящая функция вероятностей от Х определена как

{displaystyle G(z)=G(z_{1},...,z_{d})=M(z_{1}^{X_{1}}...z_{d}^{X_{d}})=sum _{x_{1},...,x_{d}=0}^{infty }p(x_{1},...,x_{d})z_{1}^{x_{1}}...z_{d}^{x_{d}}}

где p – это функция вероятности от Х. Степенной ряд абсолютно сходится по крайней мере для всех комплексных векторов z = (z1,…,zd ) ∈ ℂd с максимумом {|z1|,…,|zd |} ≤ 1.)

Свойства[править | править код]

Степенные ряды[править | править код]

Производящие функции вероятностей подчиняются всем правилам степенных рядов с неотрицательными коэффициентами. В частности, G(1) = 1, где G(1) = limz→1G(z) снизу, поскольку сумма вероятностей должна равняться 1. Таким образом, радиус сходимости любой производящей функции вероятностей должен быть как минимум 1, по теореме Абеля для степенных рядов с неотрицательными коэффициентами.

Вероятности и ожидания[править | править код]

Следующие свойства позволяют сделать вывод о различных базовых величинах, связанных с X:

1. Функция вероятности от X восстанавливается взятием производной G

{displaystyle p(k)=P(X=k)={frac {G^{(k)}(0)}{k!}}}

2. Из свойства 1 следует, что если случайные величины X и Y имеют равные производящие функции вероятностей ( {displaystyle G_{X}} = {displaystyle G_{Y}}), тогда {displaystyle p_{X}(k)=p_{Y}(k)}.То есть, если X и Y имеют одинаковые производящие функции вероятностей, то они имеют также и одинаковые распределения.

3. Нормализация функции плотности может быть выражена в терминах производящей функции

{displaystyle M(1)=G(1^{-})=sum _{i=0}^{infty }p(i)=1}
Математическое ожидание X задается как
{displaystyle M(X)=G'(1^{-})}
В более общем плане, k-ый факториальный момент,{displaystyle E(X(X-1)...(X-k+1)))} от X задается как
{displaystyle Mleft({frac {X!}{(X-k)!}}right)=G^{(k)}(1^{-}),kgeq 0}
Таким образом, дисперсия Х задается как
{displaystyle D(X)=G''(1^{-})+G'(1^{-})-[G'(1^{-})]^{2}}

4. {displaystyle G_{X}(e^{t})=M_{X}(t)}, где X – это случайная величина. {displaystyle G_{X}(t)} – это производящая функция вероятностей и {displaystyle M_{X}(t)} – это производящая функция моментов.

Функции независимых случайных величин[править | править код]

Производящие функции вероятностей полезны в частности для работы с функциями независимых случайных величин. Например:

  • Если X1, X2, …, Xn представляет собой последовательность независимых (и не обязательно одинаково распределенных) случайных величин, и
{displaystyle S_{n}=sum _{i=1}^{n}a_{i}X_{i},}
где ai – константы, тогда производящая функция вероятностей определяется как

{displaystyle G_{S_{n}}(z)=M(z^{S_{n}})=M(z^{sum _{i=1}^{n}a_{i}X_{i}})=G_{x_{1}}(z^{a_{1}})G_{x_{2}}(z^{a_{2}})...G_{x_{n}}(z^{a_{n}})}
Например, если

{displaystyle S_{n}=sum _{i=1}^{n}X_{i},}
тогда производящая функция вероятностей, GSn(z), определяется как

{displaystyle G_{S_{n}}(z)=G_{x_{1}}(z)G_{x_{2}}(z)...G_{x_{n}}(z)}
Из этого также следует, что производящая функция разности двух независимых случайных переменных S = X1 − X2 определяется как

{displaystyle G_{S}(z)=G_{X_{1}}(z)G_{X_{2}}(1/z)}
  • Предположим, что N также является независимой, дискретной случайной величиной, принимающая неотрицательные целочисленные значения, с производящей функцией вероятностей GN. Если X1, X2, …, XN независимы и одинаково распределены с общей производящей функцией вероятностей GX, тогда
{displaystyle G_{S_{N}}(z)=G_{N}(G_{X}(z))}
Это можно увидеть, используя закон полного математического ожидания следующим образом:

{displaystyle G_{S_{N}}(z)=M(z^{S_{N}})=M(z^{sum _{i=1}^{N}X_{i}})=M(M(z^{sum _{i=1}^{N}X_{i}}|N))=M((G_{X}(z))^{N})=G_{N}(G_{X}(z))}
Этот последний факт полезен при изучении процессов Гальтона-Ватсона.
  • Пусть снова N также является независимой, дискретной случайной величиной, принимающей неотрицательные целочисленные значения, с производящей функцией вероятностей GN и плотностью вероятности fi=P{N=i}. Если X1, X2, …, Xn независимы, но неодинаково распределенные случайные величины, где GXi обозначает производящую функцию вероятностей от Xi, тогда
{displaystyle G_{S_{N}}(z)=sum _{igeq 1}{f_{i}}prod _{k=1}^{i}{G_{X_{i}}(z)}}
Для одинаково распределенных Xi это упрощает тождественность указанную ранее. В общем случае иногда полезно получить разложение SN с помощью производящих функций вероятностей.

Примеры[править | править код]

  • Производящая функция вероятностей для постоянной случайной величины принимающей одно значение c (P(X=c) = 1) есть
{displaystyle G(z)=z^{c}}
  • Производящая функция вероятностей для случайной величины с биномиальным распределением есть
{displaystyle G(z)=[(1-p)+pz]^{n}}
Очевидно, что это n-кратное произведение производящих функции случайной величины с распределением Бернулли с параметром p
Таким образом производящая функция случайной величины бросания честной монеты

{displaystyle G(z)=1/2+z/2}
  • Производящая функция вероятностей для случайной величины с отрицательным биномиальным распределением с вероятностью успеха p, проводимой до r-го успеха
{displaystyle G(z)={left({frac {p}{1-(1-p)z}}right)}^{r}}
(Сходится при {displaystyle left|zright|<{frac {1}{1-p}}} )
Очевидно, что это r-кратное произведение производящих функции случайных величин с геометрическим распределением с параметром (1-p)
  • Производящая функция вероятностей для случайной величины с распределением Пуассона с параметром λ есть
{displaystyle G(z)=e^{lambda {(z-1)}}}

Ссылки[править | править код]

  • Johnson, N.L.; Kotz, S.; Kemp, A.W. (1993) Univariate Discrete distributions (2nd edition). Wiley. ISBN 0-471-54897-9 (Section 1.B9)

Производящие функции:

Пусть дискретная случайная величина Х имеет закон распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Функция

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

называется производящей функцией этого распределения.

Заметим, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Напомним:

1) Начальным моментом порядка Производящие функции в теории вероятностей - определение и вычисление с примерами решения называется математическое ожидание Производящие функции в теории вероятностей - определение и вычисление с примерами решения-й степени случайной величины

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Само математическое ожидание является начальным моментом первого порядка.

2) Центральным моментом Производящие функции в теории вероятностей - определение и вычисление с примерами решения-го порядка называется математическое ожидание Производящие функции в теории вероятностей - определение и вычисление с примерами решения-й степени соответствующей центрированной случайной величиныПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Дисперсия является центральным моментом второго порядка Производящие функции в теории вероятностей - определение и вычисление с примерами решения

3) Асимметрией распределения называется отношение центрального момента третьего порядка к кубу среднего квадратического отклонения случайной величины: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Если распределение симметрично, то Производящие функции в теории вероятностей - определение и вычисление с примерами решения На рис. 2.17.1 слева (в качестве примера закона равпределения с положительной асимметрией) изображен многоугольник распределения для биномиального закона распределения приПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения В правой части рис. 2.17.1 приведен пример закона распределения с отрицательной асимметрией (биномиальный закон при Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

4) Для нормального закона распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения Безразмерный коэффициент Производящие функции в теории вероятностей - определение и вычисление с примерами решения называется эксцессом. Этот коэффициент характеризует «островерхость» распределения в сравнении с нормальным законом распределения. Например, если говорить о функциях плотности вероятности, то при Производящие функции в теории вероятностей - определение и вычисление с примерами решения график функции плотности вероятности более островерхий, чем график кривой нормального распределения (см. левую часть рис 2.17.2). При Производящие функции в теории вероятностей - определение и вычисление с примерами решения график плотности вероятности имеет более плоскую вершину, нежели нормальная кривая при тех же математическом ожидании и дисперсии (см. правую часть рис. 2.17.2).Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Через производящую функцию можно выразить и другие начальные и центральные моменты случайной величины. Выразим через производящую функцию, например, дисперсию. Так какПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

то 

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Сформируем в правой части последнего равенства дисперсию. Для этого прибавим и отнимем квадрат математического ожидания: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Величина Производящие функции в теории вероятностей - определение и вычисление с примерами решения равна дисперсии. ПоэтомуПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Аналогично

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Итак, при z =1 имеем

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

откуда

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

а с учетом (2.17.2) Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пусть Производящие функции в теории вероятностей - определение и вычисление с примерами решения Рассмотрим модифицированную производящую функцию Производящие функции в теории вероятностей - определение и вычисление с примерами решения

С помощью этой функции можно вычислять сразу центральные моменты случайной величины. Например

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

откуда

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Пусть Х имеет пуассоновский закон распределения:Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Требуется найти математическое ожидание, дисперсию и коэффициент асимметрии этой случайной величины.

Решение. Производящая функция пуассоновского распределения имеет видПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Заметим, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения Поэтому Производящие функции в теории вероятностей - определение и вычисление с примерами решения и, в соответствии с (2.17.3),

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Для вычисления коэффициента асимметрии составим модифицированную производящую функцию. Так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения то Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Тогда

Производящие функции в теории вероятностей - определение и вычисление с примерами решения 

Поэтому по формуле (2.17.5) имеем Производящие функции в теории вероятностей - определение и вычисление с примерами решения

В итоге Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Пусть Х имеет закон распределенияПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

(Это частный случай отрицательного биномиального распределения или распределения Паскаля с параметрами 2 и Производящие функции в теории вероятностей - определение и вычисление с примерами решения). Требуется найти Производящие функции в теории вероятностей - определение и вычисление с примерами решения Производящие функции в теории вероятностей - определение и вычисление с примерами решения и коэффициент асимметрии Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Решение. Составим производящую функциюПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Для вычисления суммы ряда в скобке рассмотрим сумму рядаПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

который абсолютно сходится при Производящие функции в теории вероятностей - определение и вычисление с примерами решения Легко видеть, что нас интересует Производящие функции в теории вероятностей - определение и вычисление с примерами решения Проинтегрируем почленно ряд (2.17.6) внутри его области сходимости: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

В последней строке мы воспользовались формулой суммы бесконечной убывающей прогрессии:

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Отсюда Производящие функции в теории вероятностей - определение и вычисление с примерами решения Откуда Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Воспользуемся теперь производящей функцией (2.17.7) для вычисления числовых характеристик случайной величины X:

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

откуда следует, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения

По формуле (2.17.3)

  Производящие функции в теории вероятностей - определение и вычисление с примерами решенияПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Далее 

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

По формуле (2.17.4) вычисляем Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Так как

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

то с учетом (2.17.8) и (2.17.9) имеем

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Учитывая это получаем значение коэффициента асимметрии Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Преобразование Лапласа

Для непрерывной и неотрицательной случайной величины роль производящей функции может играть преобразование Лапласа.

Пусть Х – непрерывная, неотрицательная случайная величина с функцией распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения. Тогда Производящие функции в теории вероятностей - определение и вычисление с примерами решения

называется преобразованием Лапласа для этого распределения. (Фактически роль величины z в формуле (2.17.1) играет величина Производящие функции в теории вероятностей - определение и вычисление с примерами решения. Преимущество такого выбора состоит в том, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения.)

Отметим, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения Поэтому Производящие функции в теории вероятностей - определение и вычисление с примерами решения а Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производная любого порядка от преобразования Лапласа связана с начальными моментами случайной величины соотношением Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

где Производящие функции в теории вероятностей - определение и вычисление с примерами решения – так называемая гамма-функция Эйлера, которая при целых положительных a принимает значения Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Случайная величина X имеет функцию плотности вероятности

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(гамма-распределение с параметрами Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения). Требуется найти Производящие функции в теории вероятностей - определение и вычисление с примерами решения Производящие функции в теории вероятностей - определение и вычисление с примерами решения и коэффициент асимметрии Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Решение. Соответствующее преобразование Лапласа имеет вид Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(интегрируем по частям)

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(первое слагаемое в скобке равно нулю, так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения с увеличением Производящие функции в теории вероятностей - определение и вычисление с примерами решения убывает быстрее, чем растет Производящие функции в теории вероятностей - определение и вычисление с примерами решения)

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(интегрируем еще раз по частям)

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Вычислим начальные моменты распределения:

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

поэтому

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Далее

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Вычислим центральный момент третьего порядка: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Поэтому

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Пусть Производящие функции в теории вероятностей - определение и вычисление с примерами решения – последовательность независимых неотрицательных одинаково распределенных случайных величин с функцией плотности вероятности Производящие функции в теории вероятностей - определение и вычисление с примерами решения Производящие функции в теории вероятностей - определение и вычисление с примерами решения И пусть N – неотрицательная целочисленная случайная величина, независящая от величин Производящие функции в теории вероятностей - определение и вычисление с примерами решения и имеющая пуассоновский закон распределения с параметром Производящие функции в теории вероятностей - определение и вычисление с примерами решения Для случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения требуется найти Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Решение. Производящая функция пуассоновского закона распределения равна Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Преобразование Лапласа показательного распределения равноПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Поэтому по формуле (2.17.14) имеемПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения а Производящие функции в теории вероятностей - определение и вычисление с примерами решения

то 

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Характеристические функции

Замена z на Производящие функции в теории вероятностей - определение и вычисление с примерами решения в определении производящей функции позволила рассматривать непрерывные неотрицательные величины. Выгода от такой замены состоит в мультипликативном свойстве: Производящие функции в теории вероятностей - определение и вычисление с примерами решения Таким же свойством обладает и показательная функция чисто мнимого аргумента, которая для действительных x определяется равенством:

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Характеристической функцией Производящие функции в теории вероятностей - определение и вычисление с примерами решения случайной величины X называется комплексно-значная функция, определенная при Производящие функции в теории вероятностей - определение и вычисление с примерами решения соотношением

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Если Производящие функции в теории вероятностей - определение и вычисление с примерами решения – функция распределения случайной величины X, то Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Существование интеграла, определяющего характеристическую функцию, вытекает из непрерывности функции Производящие функции в теории вероятностей - определение и вычисление с примерами решения и ее ограниченности: Производящие функции в теории вероятностей - определение и вычисление с примерами решения Для дискретной случайной величины X с возможными значениями Производящие функции в теории вероятностей - определение и вычисление с примерами решения и их вероятностями Производящие функции в теории вероятностей - определение и вычисление с примерами решения запись (2.17.15) расшифровывается как Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Для непрерывной случайной величины X с функцией плотности вероятности Производящие функции в теории вероятностей - определение и вычисление с примерами решения 

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Пусть случайная величина X имеет пуассоновский закон распределения, т.е.Производящие функции в теории вероятностей - определение и вычисление с примерами решения Тогда по формуле (2.17.11)Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Пусть Производящие функции в теории вероятностей - определение и вычисление с примерами решения Тогда в соответствии с формулой (2.17.12) Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Вместо непосредственного вычисления интеграла, которое требует специальной математической техники, найдем его величину косвенным способом. Заметим, что

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Полученный интеграл берем по частям, полагая Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(первое слагаемое равно нулю так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения а Производящие функции в теории вероятностей - определение и вычисление с примерами решения).

В итоге для искомой характеристической функции получаем уравнение, которое при начальном условии Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет решение Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Подобным же образом можно показать, что закон распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет характеристическую функциюПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Свойства характеристических функций.

1. Производящие функции в теории вероятностей - определение и вычисление с примерами решения для всех вещественных Производящие функции в теории вероятностей - определение и вычисление с примерами решения

2. Если существует Производящие функции в теории вероятностей - определение и вычисление с примерами решения– момент порядка Производящие функции в теории вероятностей - определение и вычисление с примерами решения то функцияПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения имеет Производящие функции в теории вероятностей - определение и вычисление с примерами решения непрерывных производных и

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

3. Пусть Производящие функции в теории вероятностей - определение и вычисление с примерами решения где Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения – постоянные величины, а X имеет характеристическую функцию Производящие функции в теории вероятностей - определение и вычисление с примерами решения Тогда характеристическая функция случайной величины Y имеет вид Производящие функции в теории вероятностей - определение и вычисление с примерами решения

4. Характеристическая функция однозначно определяет распределение случайной величины.

5. Если X1 и X2 – независимые случайные величины, а Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения – их характеристические функции, то характеристическая функция суммы Производящие функции в теории вероятностей - определение и вычисление с примерами решения равна произведению характеристических функций слагаемых:Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Это следует из того, что в силу независимости слагаемых Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Можно показать, что для любого конечного числа независимых случайных величин Производящие функции в теории вероятностей - определение и вычисление с примерами решения характеристическая функция их суммы Производящие функции в теории вероятностей - определение и вычисление с примерами решения равна произведению характеристических функций слагаемых.

Пример:

Случайные величины X и Y независимы и имеют пуассоновские законы распределения с параметрами Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения соответственно: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Требуется найти закон распределения случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения.

Решение. Согласно формуле (2.17.18) характеристические функции случайных величин X и Y имеют вид: Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Сумме независимых случайных величин соответствует произведение характеристических функций слагаемых. Поэтому Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет характеристическую функцию Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет пуассоновский закон распределения с параметром Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Полученный результат известен как факт устойчивости пуассоновского закона распределения. Этот результат можно обобщить на сумму любого конечного числа пуассоновских случайных величин.

Теорема. Если случайные величины Х1 и Х2 независимы и имеют соответственно нормальные законы распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения то их сумма Производящие функции в теории вероятностей - определение и вычисление с примерами решенияимеет тоже нормальный закон распределения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Доказательство. Пусть Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения Их характеристические функции в соответствии с формулой (2.17.15) имеют вид Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Тогда характеристическая функция суммы Производящие функции в теории вероятностей - определение и вычисление с примерами решения:Производящие функции в теории вероятностей - определение и вычисление с примерами решения

А это и означает, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Случайная величина Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет закон распределения.Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Требуется найти характеристическую функцию этой случайной величины. Используя свойства характеристических функций, найти характеристическую функцию случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения полагая слагаемые независимыми. Используя запись характеристической функции, найти Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Решение. По формуле (2.17.16)Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Поэтому характеристическая функция случайной величины Y имеет видПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Для вычисления Производящие функции в теории вероятностей - определение и вычисление с примерами решения находим Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Последнее выражение при Производящие функции в теории вероятностей - определение и вычисление с примерами решения равно нулю. По свойству 2 это означает, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения Так как вторая производная характеристической функции по z равнаПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

при Производящие функции в теории вероятностей - определение и вычисление с примерами решения равна Производящие функции в теории вероятностей - определение и вычисление с примерами решения то из свойства 2 следует, что Производящие функции в теории вероятностей - определение и вычисление с примерами решенияПоэтому

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

ОтветПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Требуется найти характеристическую функцию случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения где все Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеют закон распределения Производящие функции в теории вероятностей - определение и вычисление с примерами решения независимы в совокупности. С помощью характеристической функции найти Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Решение. Найдем сначала характеристическую функцию для Производящие функции в теории вероятностей - определение и вычисление с примерами решения В соответствии с формулой (2.17.7)

 Производящие функции в теории вероятностей - определение и вычисление с примерами решения

После замены переменных Производящие функции в теории вероятностей - определение и вычисление с примерами решения получаемПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения Из свойства 5 характеристических функций следует, что случайная величина Производящие функции в теории вероятностей - определение и вычисление с примерами решения имеет характеристическую функциюПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Для вычисления числовых характеристик случайной величины Y найдем сначала первую и вторую производные характеристической функции при Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Это означает, что Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ. Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Пример:

Случайная величина Х имеет функцию плотности вероятностиПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения

Требуется найти характеристическую функцию этой случайной величины и ее Производящие функции в теории вероятностей - определение и вычисление с примерами решения и Производящие функции в теории вероятностей - определение и вычисление с примерами решения Требуется также найти характеристическую функцию случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения где величины Производящие функции в теории вероятностей - определение и вычисление с примерами решения независимы и имеют распределение (2.17.21).

Решение. Найдем сначала характеристическую функцию:Производящие функции в теории вероятностей - определение и вычисление с примерами решения

(так как Производящие функции в теории вероятностей - определение и вычисление с примерами решения то равенство можно продолжить следующим образом)Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Тогда Производящие функции в теории вероятностей - определение и вычисление с примерами решения Откуда Производящие функции в теории вероятностей - определение и вычисление с примерами решенияПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения поэтому Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Характеристическая функция случайной величины Производящие функции в теории вероятностей - определение и вычисление с примерами решенияПроизводящие функции в теории вероятностей - определение и вычисление с примерами решения имеет вид:Производящие функции в теории вероятностей - определение и вычисление с примерами решения

Ответ.  Производящие функции в теории вероятностей - определение и вычисление с примерами решения Производящие функции в теории вероятностей - определение и вычисление с примерами решения

  • Теоремы теории вероятностей
  • Основные законы распределения дискретных случайных величин
  • Непрерывные случайные величины
  • Закон больших чисел
  • Центральная предельная теорема
  • Ковариация в теории вероятности
  • Функциональные преобразования двухмерных случайных величин
  • Правило «трех сигм» в теории вероятности

Кратко остановимся на понятие производящей
функции конечных дискретных случайных
величин.

Функцию определённую равенством
,
где
некоторый параметр называют
производящей функцией
для
последовательности повторных независимых
опытов. Очевидно, что приимеет место равенство

,

для
любого натурального числа

Пусть производится
испытаний, причём в первом испытания
вероятность появления событияравнаво втором равнавм
испытании равнаи вероятностинепоявлениясобытиясоответственно равныЗаобозначим вероятность появления
событиявиспытаниях ровнораз.

Производящей функцией вероятностей
называют функцию, определяемую равенством

()

Таким образом, вероятность
равна коэффициенту прий
степени многочлена,
определённой равенством (),
т.е. равна коэффициенту прив разложении производящей функции по
степеням.

Замечание. Отметим, что придолжно выполняться равенство (обычно
называется контроль).

().

При
имеем равенство

.

Следовательно,
коэффициент при
равно,
приравнои при.

Следует заметить, что если в различных
испытаниях появляется различные события
(в первом испытании событие
,
во втором событиеи
т.д.), то изменяется лишь истолкование
коэффициентов при различных степенях.
Например, в равенстве ()
коэффициентопределяет вероятность появления двух
событийи.

Пример 8. Устройство состоит из трёх
независимо работающих элементов.
Вероятности безотказной работы элементов
(за время)
соответственно равныНайти вероятности того, что за времябудут работать безотказно:

а) все три элемента работают;

б) два элемента работают;

в) один элемент работает;

г) ни один из элементов не будет работать.

Решение. Вероятности безотказной
работы элементов соответственно равныСледовательно, вероятности того, что
элементы откажут, соответственно равны

Составим производящую функцию:

а) Вероятность того, что три элемента
будут работать безотказно, равна
коэффициенту при

б) Вероятность того, что два элемента
будут работать безотказно, равна
коэффициенту при

в) Вероятность того, что один элемент
будет работать безотказно, равна
коэффициенту при

г) Вероятность того, что ни один из
элементов не будет работать безотказно,
равна свободному члену:

Легко видет, что выполняется контроль:

.

Задания. Покажите, что

1. гдештрихозначаетю
производную функциипо
параметрупричём

2.

3.,

гдечисло
размещений изэлементов по.

Заметим, что вероятности
,являются коэффициентами при степенив разложении

.

6. Плотность распределения вероятностей

непрерывной
случайной величины

Важнейшей характеристикой непрерывной
случайной величины (кроме функции
распределения) является так называемая
функция плотности распределения.Напомним, что «Случайную величину
называют непрерывной, если ее функция
распределениянепрерывна
в любой точке и дифференцируема всюду,
за исключением, может быть отдельных
точек».

Плотностью распределения вероятностейнепрерывнойслучайной величины
называют некоторую функциюпервую производную от функции
распределения
:

(7)
.

Из этого определения следует, что
функция распределения является
первообразной функциейдля
функции плотности распределения.

Функцию
называют такжедифференциальной
функцией распределения
: она выражает
одной из форм закона распределения
случайной величины, относящихся только
к непрерывным случайным величинам.

Следует заметить, что для описания
распределения вероятностей д.с.в.
понятие
плотность распределения неприменима.

Рассмотрим вероятностный смысл плотности
распределения. По определению производной
функции имеем

Далее,
согласно формуле (2), выполняется
равенство

Отношение
представляет собой «среднюю вероятность»,
которая приходится на единицу длины
участка.
Тогда получим

(8)
,

т.е.
плотность распределения
н.с.в.
равна
пределу отношения вероятности попадания
н.с.в.в
промежутокк длинеэтого промежутка, когда величинастремиться к нулю. Из равенства (8)
следует, что.

Тем самым, установлено, что плотность
вероятности н.с.в.
определяется
как функцияудовлетворяющая, условию.
Выражениеназываетсяэлементом вероятности.

Следует отметить, что понятие функции
плотности распределения вероятности
,
аналогично таким понятиям, как плотность
распределения масс на оси абсцисс или
плотность распределения электрического
тока в теории электричества в физике
и т.д.

Теперь, рассмотрим свойства функции
плотности распределения.

С.1.
.

неотрицательная функция на всей числовой
оси.

С.2. Вероятность попадания
н.с.в.
в промежутокравна определенному интегралу от ее
функции плотности в пределах отдо,
т.е. верно равенство

(9)

С.3. Если
функция распределения н.с.в.и– функция плотности, то имеет место
равенство

(10)
.

С.4. Интеграл от функции плотности
вероятности н.с.в.
в бесконечных пределах равен единице
(условие нормировки – контроль)
т.е. еслиплотность распределения некоторой
с.в.,
тогда

.
(11).

Условие нормировки
для н.с.в. напоминает аналога условия
«контроля»
для случая д.с.в..

1.Функция плотности распределения
неотрицательная функция потому, что
по определениюнеубывающая
и монотонна, а следовательно.
Это означает, что график функция
плотности, называемыйкривой
распределения
, расположена не ниже
оси абсцисс, также следует отметить,
что функция плотности может принимать
сколь угодно большие значения.

2.Посколькуестьпервообразнаяфункцией для
функции,
тогда в соответствии с формулой
Ньютона-Лейбница справедливо равенство

(12)

Отсюда, согласно определению функции
получим

(13)
.

Геометрический смысл этого равенства
следующее: интеграл от элемента
вероятности
есть площадь фигуры
(),
ограниченной сверху кривой распределенияи опирающейся на отрезок [a;b]

рис.21-Письменный

3.На основании свойстваС.2. И
то, чтополучим:

(14)
.

4.Подставляя в формуле (13) соответственно,
получаем достоверное событиет.е.

(15)
.

Геометрическая трактовка свойство
С.4.(свойство нормировки) означает,
что площадь фигуры (S)
ограниченной функциейи числовой осью абсцисс,
равна единице.

Теперь, мы можем дать определение
непрерывной с.в. в связи с функцией
распределения плотности
:случайная величина
называется
непрерывной, если существует
неотрицательная функция

такая, что при любом

её функция распределения
можно представить в виде

;

отсюда получим равенство
дифференциальное равенство
(дифференциальный закон распределения).

Следовательно, функций
иявляются равноправными (эквивалентными)
характеристиками случайной величины.
Отметим, что на основании формулы (13)
непосредственно следует равенство

.

Отсюда,
также следуют равенства:

.

Пример 9. Пусть плотность распределения
с.в.задана функцией,.

1. Найти значение параметра
,
при которомбудет
функцией плотности,

2. Выписать функцию распределения
.

Решение. На основанииС.4. должно
выполняться равенство (см.(11))

.

Применяя метод подсчёта несобственных
интегралов, при этом воспользуюсь
табличным интегралом для функции
арктангенса с последующим применением
формулы Ньютона –Лейбница получим

.

Следовательно,
.
Далее, выпишем функцию распределения
с.в.плотность распределения которой равна.
Проведя обычные рассуждения на основании
формулы (14) получим


.

Такое
распределение называют распределением
Коши.

Задание. Проверьте справедливость
дифференциального закона распределения
и убедитесь, чтоявляется первообразной функцией.

Пример 9. Пусть плотность распределения
с.в.задана функцией,

1. Найти значение параметра
,
при которомбудет
функцией плотности,

2. Выписать функцию распределения
.

Решение. Аналогично как в примере
1 пользуясь равенством (11) получим

Следовательно,

Задание. 1. Проверьте
справедливость дифференциального
закона распределения
и убедитесь, что
является первообразной функцией для.

2. Пусть
и плотность распределения н.с.в.задана функцией

Найти значение параметра
C,
выписать явный вид функции распределения
и проверить выполнение дифференциального
закона.

Пример 10. Однородная проволока
длиной 1 м. растягивается за концы и
при этом разрывается. Пустьслучайная
величина, равная расстоянию от точки
разрыва до левого конца проволки.
Используя геометрические вероятности,
найдём, что

для
любых
Следовательно, функция распределения
и плотность распределения этой случайной
величины имеют вид:

Задание. Проверьте выполнения
дифференциального закона.

Соседние файлы в папке Теория вероятностей от исмоилова

  • #
  • #
  • #
  • #
  • #
  • #
  • #
  • #

    06.02.20162.36 Mб71~WRL0002.tmp

  • #

    06.02.20161.87 Mб67~WRL0005.tmp

  • #

    06.02.20161.01 Mб66~WRL0205.tmp

  • #

    06.02.20162.41 Mб65~WRL0264.tmp

Содержание:

  1. Примеры с решением
  2. Биномиальный закон
  3. Геометрический закон
  4. Закон Пуассона

Мы видели, что дискретные случайные величины, рассмотренные в предыдущих параграфах, принимали только целые значения Производящая функция Нахождение числовых характеристик таких величин упрощается, если рассмотреть производящие функции.

Определение. Производящей функцией дискретной целочисленной случайной величины Производящая функция с законом распределения Производящая функция называется функция, заданная степенным рядом

Производящая функция

Поскольку все коэффициенты этого ряда не превосходят 1, то сравнение с геометрической прогрессией показывает, что этот ряд сходится, по крайней мере, для значений Производящая функция Из свойства закона распределения видно, что Производящая функция так что область сходимости ряда содержит точку Производящая функция

Теорема 4.4. Производящая функция суммы независимых случайных величин Производящая функция равна произведению производящих функций слагаемых

Производящая функция

Доказательство. Имеем по определению

Производящая функция

По этой ссылке вы найдёте полный курс лекций по теории вероятности:

Примеры с решением

Пример 4.8.

Найти производящую функцию для биномиального закона.

Решение:

Если вспомнить, что формула Бернулли получается из разложения бинома, то легко сообразить, что

Производящая функция

Можно также вспомнить, что случайная величина Производящая функция распределенная по биномиальному закону, представляется в виде суммы Производящая функция независимых слагаемых – индикаторов появления события Производящая функция Очевидно, что для одного слагаемого производящая функция равна Производящая функция Теперь осталось применить (4.23).

Возможно вам будут полезны данные страницы:

Пример 4.9.

Найти производящую функцию для геометрического закона распределения.

Решение:

Имеем Производящая функция поэтому

Производящая функция Данное равенство справедливо для всех значений Производящая функция удовлетворяющих неравенству Производящая функция для которых мы применили формулу суммы бесконечно убывающей геометрической прогрессии. Таким образом,

Производящая функция

Пример 4.10.

Найти производящую функцию для распределения Пуассона.

Решение:

Для пуассоновского закона с параметром Производящая функция имеем Производящая функцияПроизводящая функция

Поэтому

Производящая функция

причем все ряды сходятся для любых значений аргумента Производящая функция Окончательно

Производящая функция

В качестве следствия получим теорему.

Теорема 4.5. Сумма независимых случайных величин, распределенных по закону Пуассона, распределена по тому же закону.

Доказательство. Пусть Производящая функция – независимые случайные величины, распределенные по закону Пуассона с параметрами Производящая функция Тогда их производящие функции находятся по формуле (4.26):

Производящая функция

а производящая функция суммы Производящая функция находится согласно теореме 4.4

Производящая функция

Отсюда видно, что сумма будет распределена по закону Пуассона с параметром Производящая функция что и требовалось доказать.

Зная производящую функцию дискретной случайной величины Производящая функция нетрудно найти ее математическое ожидание и дисперсию.

Теорема 4.6. Для дискретной случайной величины Производящая функция с производящей функцией Производящая функция выполняются следующие соотношения:

Производящая функция

Доказательство. Дифференцируя почленно ряд (4.22) два раза, имеем

Производящая функция

Подставляя Производящая функция получим

Производящая функция

откуда легко получить формулы (4.25), (4.26).

Комбинируя полученные выражения для производящих функций биномиального, геометрического и пуассоновского законов (4.23), (4.24), (4.25) с формулами (4.26), (4.27), теперь нетрудно найти основные числовые характеристики этих законов.

Биномиальный закон

Из выражения (4.23) для производящей функции получим

Производящая функция

Подставляя Производящая функция и учитывая, что Производящая функция имеем

Производящая функция

Используя формулы (4.26), (4.27), получим

Производящая функция

откуда Производящая функция

Геометрический закон

Дифференцируя два раза производящую функцию, имеем

Производящая функция

Отсюда

Производящая функция

откуда Производящая функция что и требовалось.

Закон Пуассона

Имеем

Производящая функция

поэтому Производящая функция Подставляя найденные значения в формулы (4.26), (4.27), получим Производящая функция

Производящая функция

Производящая функция

Лекции:

  • Комбинаторные задачи: пример решения
  • Классическое определение вероятности
  • Геометрическое определение вероятности
  • Элементы комбинаторики
  • Действии над событиями
  • Количество сочетаний
  • Число сочетаний: формула, расчет
  • Сочетания с повторениями
  • Комбинаторика формулы: основные элементы
  • Элементы комбинаторики: примеры решения

Производящая функция

Для случайной величины $xi$ производящая функция моментов (сокращенно ПФМ) определяется следующим образом:

$$
M_{xi}(t)=M[e^{txi}].
$$

Для дискретной случайной величины с законом вида $(x_i,p_i)$ ПФМ выражается как

$$M_{xi}(t)=M[e^{txi}]=sum_i e^{tx_i}cdot p_i.$$

Для непрерывной случайной величины с плотностью распределения $f(x)$:

$$M_{xi}(t)=M[e^{txi}]=int_{-infty}^{infty} e^{tx}cdot f(x),dx.$$

Производящая функция моментов — это двустороннее преобразование Лапласа от плотности распределения случайной
величины.

По известной ПФМ можно вычислять моменты случайной величины по формуле:

$$M[xi^n] = frac{d^n}{dx^n} M_{xi}(t)|_{t=0} $$

ПФМ однозначно определяет распределение случайной величины. ПФМ суммы независимых случайных величин равна произведению их проиводящих функций моментов. Производящая функция существует только в случае существования всех моментов, а характеристическая функция – всегда.

В этом разделе вы найдете примеры нахождения производящей функции для разных законов распределения, в том числе для заданных произвольно случайных величины (см. задачи 3 и 4), а также пример решения обратной задачи – по имеющейся производящей функции восстановить закон распределения случайной величины.

Понравилось? Добавьте в закладки

Примеры решений: производящая функция

Задача 1. Найти производящую функцию моментов для случайной величины, имеющей геометрическое распределение. Вычислить с помощью найденной функции математическое ожидание и дисперсию.

Задача 2. Найти производящую функцию моментов для случайной величины, имеющей распределение Пуассона с параметром $lambda$. Вычислить с помощью найденной функции математическое ожидание и дисперсию.

Задача 3. Дискретная случайная величина X имеет ряд распределения.
x=-2 x=0 x=2
1/4 1/2 1/4
Найти производящую функцию моментов случайной величины X и с ее помощью вычислить математическое ожидание и дисперсию.

Задача 4. Абсолютно непрерывная случайная величина имеет плотность распределения
$$
p(x)=
left{
begin{array}{l}
sin(x)/2, x in[0;pi],\
0, x notin[0;pi] \
end{array}
right.
$$
Найти производящую функцию моментов.

Задача 5. Задана производящая функция вероятностей $p(t)=t(pt+q)^n$. Найти ряд и функцию распределения соответствующей случайной величины.

Мы отлично умеем решать задачи по теории вероятностей

Добавить комментарий