Статистическая проверка гипотез
Содержание
Введение
Статистическая проверка гипотез
1.Статистическая гипотеза. Статистический критерий. Ошибки, возникающие при проверке гипотез
2. Порядок проверки статистических гипотез
3. Проверка однородности результатов эксперимента в целях исключения грубых ошибок
4. Проверка гипотезы о воспроизводимости опытов
5. Проверка гипотезы о нормальном распределении ошибок эксперимента
6. Проверка гипотезы о виде распределения. ( Критерий согласия Пирсона )
6.1 Расчёт теоретических частот для нормального распределения
7.Проверка гипотезы о согласованности мнений экспертов (априорное ранжирование переменных)
8. Уравнение линейной регрессии. Коэффициент корреляции. Проверка гипотезы о значимости коэффициента корреляции
8.1 Метод наименьших квадратов
8.2 Проверка незначимости коэффициента корреляции
8.3 Использование корреляционной таблицы для вычисления коэффициента корреляции
Вывод
Список литературы
Приложения
Введение
Тема курсовой работы «Статистическая проверка гипотез».
К важнейшим направлениям научно-технического прогресса относятся автоматизация производства, широкое применение компьютеров и роботов, создание гибких автоматизированных устройств и т.д. Во всех этих направлениях ведущая роль принадлежит электронике.
При создании электронной и электромеханической аппаратуры основные трудозатраты приходятся на ее настройку, снятие характеристик и испытания. При этом нередко используется малоэффективный традиционный метод однофакторного эксперимента, недостаточно внимания уделяется организации и планированию эксперимента и вероятностно-статистическому анализу получаемых данных. Чтобы повысить производительность труда в данной области, специалистам необходимо знать основы математической теории эксперимента и успешно применить ее на практике.
Цель работы – ознакомится со статистической проверкой гипотез, а именно:
о воспроизводимости результатов эксперимента, о виде распределения результатов эксперимента, о наличии корреляционных связей между факторами и переменной состояния и др., рассмотрении практических примеров.
Статистическая проверка гипотез
1. Статистическая гипотеза. Статистический критерий. Ошибки, возникающие при проверке гипотез
Статистической называют гипотезу о виде неизвестного распределения или о параметрах известного распределения.
Например, гипотеза H0 - случайная величина распределена по нормальному закону.
Нулевой (основной) называется выдвинутая гипотеза H0.
Альтернативной (конкурирующей) называется гипотеза, противоречащая основной (конкурирующих гипотез может быть несколько).
Например, основная гипотеза - математическое ожидание случайной величины Y равно 5
H0 : My=5,
конкурирующие:
H1
:
![]()
H2
:
![]()
H3 :
![]()
Статистическим критерием (К) называется случайная величина, точное или приближённое распределение, которой известно и которая служит для проверки справедливости нулевой гипотезы.
Множество возможных значений критерия делится на две непересекающихся области:
1) значения, при которых нулевая гипотеза справедлива (область принятия гипотезы).
2) значения, при которых нулевая гипотеза отвергается (критическая область).
Критическая область может быть односторонней (левосторонней, правосторонней) или двусторонней.

Рис.1. Виды критических областей: правосторонняя, левосторонняя и двусторонняя.
Точка Ккр, отделяющая критическую область от области принятия гипотезы, называется критической точкой.
Чтобы определить критическую область, выбирают число q-уровень значимости. q- вероятность того, что при справедливости нулевой гипотезы значение критерия К попадает в критическую область. Тогда для правосторонней критической области Ккр определяется из условия:
P { K > Kkp } = q.
Значение критерия табулировано, т. е. Kkp можно найти по таблице распределения критических точек в зависимости от уровня значимости q и числа степеней свободы f. -Наблюдаемое значение критерия Kнабл определяется по результатам эксперимента.
Если Kнабл<Kkp, то гипотеза H0 принимается. Если Kнабл>Kkp, то H0 отвергается, а принимается конкурирующая гинотеза H1.
Для левосторонней критической области критическая точка определяется из условия:
P { K < Kkp } = q.
Для двухсторонней:
P { K < K’kp } + P { K > K”kp } = q.
Если двусторонняя область симметрична относительно начала координат, то:
P { K
< K’kp
} =
.
Так как наблюдаемое значение критерия определялось по результатам эксперимента, то Кнабл-случайная величина и, следовательно, могут возникать ошибки при принятии гипотезы. Различают ошибки первого и второго рода. К ошибкам первого рода относят те, при которых отвергается правильная гипотеза. К ошибкам второго рода, относят те, при которых принимается неправильная гипотеза. Допустимой вероятностью ошибки первого рода является q-уровень значимости. Однако. если уменьшать q, то возрастает вероятность принятия неверной гипотезы, т. е. вероятность ошибок второго рода. Если справедлива гипотеза H1, то это считается доказанным, если справедлива гипотеза H0-то говорят, что результаты эксперимента не противоречат нулевой гипотезы. Для того чтобы считать H0 доказанной нужно или вновь повторить эксперимент или проверить гипотезу с помощью других критериев.
2. Порядок проверки статистических гипотез
1) Выбор нулевой и альтернативной гипотез H0 и H1.
2) Выбор критерия K и уровня значимости q.
3) Вычисление Kнабл по результатам эксперимента.
4) Поиск Kkp по таблице распределения критических точек для выбранного критерия.
5) Если Kнабл попадает в критическую область, то принимается альтернативная гипотеза H1, если Kнабл попадает в область принятия гипотезы, то принимается основная гипотеза H0.
3. Проверка однородности результатов эксперимента в целях исключения грубых ошибок
Результаты
эксперимента
удобно оформлять
в виде таблицы
. В графах 2-5 содержится
план эксперимента
(значение факторов),
в остальных
графах – результаты
опытов. Пусть
поводится N
серий экспериментов
серии (то есть
в каждом из N
точек факторного
пространства
проводится
по
опытов). Обозначим
:
-значение
j-того фактора
в i-той серии;(
j = 1,…,n
).
-значения
отклика (переменной
состояния ) в
j-ом параллельном
опыте i-ой
серии .
Вычислим оценки математического ожидания для каждой серии:
Таблица 1.
|
№ серии |
|
|
… |
|
|
|
… |
|
| 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 |
| 1 |
|
|
… |
|
|
|
… |
|
| 2 |
|
|
|
|
|
… |
|
|
|
: : |
||||||||
| N |
|
|
… |
|
|
|
… |
|
Грубые ошибки искажают результаты эксперимента и должны быть исключены .Чаще всего при этом используют r-критерий .
В соответствии
с этим критерием
результаты
эксперимента
в i-ой серии
,в которой
предполагается
ошибка , ранжируется
,т.е. располагается
в неубывающем
порядке
Одно
из крайних
значений считается
промахом (ошибкой
),если оно далеко
отстоит от всех
остальных.
Проверяется
нулевая гипотеза
:
не выделяется
значимо среди
остальных
результатов
серии.
Альтернативная
гипотеза : отличие
от остальных
значимо.
Если сомнительным
показалось
наименьшие
значение
,
то наблюдаемое
значение критерия
определяется
формулой:

Если сомнительным
оказалась
наблюдение
в серии значение
,
то

По таблице
распределения
r-критерия
, используя
число степеней
свободы
и уровень значимости
определяется
критическое
значение критерия
.
Если
,
то
принимается,
то есть результаты
эксперимента
можно считать
однородными.
В противном
случае резко
выделяющийся
результат
эксперимента
исключается
из дальнейшей
обработки.
Чтобы не нарушать
методику дальнейшей
обработки надо
или исключить
столбец содержащий
измерение ,
признанное
ошибкой, или
в этой точке
произвести
дополнительный
опыт.
4. Проверка гипотезы о воспроизводимости опытов
При проведении экспериментов необходимо, чтобы опыты были воспроизводимы, т.е. результаты опытов, поставленных в одинаковых условиях, не имели существенных различий.
Выбираем нулевую гипотезу H0 : опыты воспроизводимы и альтернативную гипотезу H1 : опыты не воспроизводимы.
Для проверки справедливости H0 ставится N-серий экспериментов, в каждой серии по m-параллельных опытов. Параллельными называются опыты, проводимые в одинаковых условиях, т.е. при одних и тех же значениях входных переменных. Следовательно, в факторном пространстве выбирается N точек и в каждой точке проводится по m опытов. Результаты экспериментов заносятся в таблицу:
Таблица 2.
| №серии | Результаты экспериментов |
|
|
|
1 2 : : N |
Y11 Y12 ... Y1m Y21 Y22 ... Y2m : : YN1 YN2 ... YNm |
:
|
:
|
-
оценка математического
ожидания результатов
эксперимента
в i-ой серии.
-
оценка дисперсии
результатов
эксперимента
в i-ой серии.
Для проверки нулевой гипотезы выбирается критерий Кохрена (G):
.
По таблице распределения критических точек критерия Кохрена в зависимости от уровня значимости q, числа степеней свободы f=m-1 и числа серий N определяем критическую точку:
Gkp = G (q, f, N).
По результатам эксперимента вычисляем наблюдаемое значение критерия:
.
Если Gнабл<Gкр, то гипотеза H0 принимается, в противном случае принимается H1. Если гипотеза H0 не принята, то для воспроизводимости результатов эксперимента необходимо или повысить число параллельных опытов m, или увеличить точность измерения переменной состояния. Если опыты воспроизводимы, то вычисляется ошибка опыта (дисперсия воспроизводимости опытов)
.
Дисперсия воспроизводимости опытов S02 является оценкой дисперсии переменной состояния sy2.
Число степеней свободы дисперсии воспроизводимости: f0=N(m-1).
В некоторых
лабораторных
экспериментах
повторные
измерения
отклика в
параллельных
опытах дают
один и тот же
результат .
Тогда для расчета
дисперсии
воспроизводимости
можно воспользоваться
метрологическими
характеристиками
измерительных
приборов. В
паспортных
данных прибора
указывается
класс его точности
( K , % от предела
измерения
).
Это позволяет
определить
максимальную
ошибку измерения
.
(1)
Случайная
ошибка прибора
подчиняется
нормальному
закону распределения
. В машиностроении
обычно считается
, что
,
при этом вероятность
попадания в
интервал
равна 0,9973 и является
технической
единицей.
В радиоэлектронной
аппаратуре
стабильность
параметров
активных и
пассивных
элементов
значительно
ниже и надежность
0,95 вполне приемлема.
Поэтому выбираем
.
Подставляя
значение
в
выражение (1),
получим дисперсию
.
Дисперсию воспроизводимости полагаем равной
.
Пример:
Проверить гипотезу о воспроизводимости опытов, в которых переменная состояния y зависит от трех факторов x1 , x2 , x3 . Выбрать уровень значимости q=0,05.
Проведены 8 серий по 2 параллельных опыта в каждой серии. Результаты эксперимента и расчеты сведены в таблицу:
Таблица 3.
|
№ серии |
X1 | X2 | X3 | Y1 | Y2 |
|
Si2 |
| 1 | 0.40 | 0.20 | 24.00 | 0.71 | 0.77 | 0.74 | 0.001800 |
| 2 | 0.40 | 0.38 | 36.00 | 0.61 | 0.54 | 0.58 | 0.002450 |
| 3 | 0.40 | 0.38 | 24.00 | 0.65 | 0.59 | 0.62 | 0.001800 |
| 4 | 0.40 | 0.20 | 36.00 | 0.75 | 0.72 | 0.74 | 0.000450 |
| 5 | 0.60 | 0.20 | 24.00 | 0.73 | 0.64 | 0.69 | 0.004050 |
| 6 | 0.60 | 0.20 | 36.00 | 0.90 | 0.79 | 0.84 | 0.006050 |
| 7 | 0.60 | 0.38 | 24.00 | 0.74 | 0.71 | 0.73 | 0.000450 |
| 8 | 0.60 | 0.38 | 36.00 | 0.80 | 0.78 | 0.79 | 0.000200 |
Для каждой
серии опытов
вычисляем
среднее значение
и дисперсии
результатов
Si2
. Далее выбираем
и вычисляем
.Наблюдаемое
значение критерия:
.
Значение критерия Кохрена по таблице: Gкр=0.82.
Так как Gнабл<Gкр , то нулевая гипотеза H0 принимается.
Опыты воспроизводимы. Ошибка опыта S02=0.0021562.
5. Проверка гипотезы о нормальном распределении ошибок эксперимента
Как правило, ошибки результатов экспериментов распределены по нормальному закону .
Выберем следующие гипотезы:
H0: ошибки эксперимента распределены по нормальному закону;
H1: ошибки эксперимента не распределены по нормальному закону.
Для проверки гипотезы H0 используется W–критерий.
Пусть проведено m параллельных опытов ( 3 Ј m Ј 50 ).
Для обработки результатов эксперимента нужно:
Расположить значения переменной состояния в неубывающем порядке:
y1 Ј y2 Ј ...Ј ym .
Вычислить:
.
Вычислить:
где
,
если m-чётное
и
,
если m-нечётное.
Коэффициенты ai выбираются из таблицы в зависимости от m.
Вычислить наблюдаемое значение критерия:
По таблице критических точек найти Wкр -критическое значение критерия в зависимости от числа степеней свободы f = m и уровня значимости q:
Wкр = W(q, f );
Если наблюдаемое значение больше критического Wнабл > Wкр (критическая область левосторонняя), то гипотеза H0 принимается, т.е. ошибки эксперимента распределены по нормальному закону. В противном случае, если Wнабл<Wкр , то гипотеза H0 отвергается.
Пример:
Проведено 16 параллельных опытов. Получены следующие значения переменной состояния Y:
0.035 0.047 0.055 0.067 0.066 0.077 0.078 0.088
0.1 0.121 0.136 0.153 0.176 0.22 0.231
m = 16, q = 0,05, l = 16/2 = 8.
Отметим, что результаты эксперимента расположены в неубывающем порядке.
;
;
где значения
для m = 16 взяты
из таблицы:

Наблюдаемое значение критерия:
.
Критическое
значение критерия:
![]()
Так как Wнабл>Wкр, , то ошибки эксперимента распределены по нормальному закону.
6. Проверка гипотезы о виде распределения. ( Критерий согласия Пирсона )
Пусть проведены N экспериментов в одинаковых условиях. Проверяется гипотеза H0 : результаты эксперимента распределены по закону А. Критерий для проверки выдвинутой гипотезы называется критерием согласия.
Разобьем интервал полученных результатов эксперимента [Ymin , Ymax] на m равных интервалов.
[Yi -1 , Yi ]; i=1,...,m.
Обозначим через Yi* середину i-го интервала, ni - число результатов, попавших в i-й интервал. Получим ряд распределения:
| Yi* | Y1* | Y2* | ... | Ym* |
| ni | n1 | n2 | ... | nm |
Пусть в предположении, что результаты эксперимента имеют распределение А, вычислены теоретические частоты ni’.
В качестве статистического критерия выбирается случайная величина:

Чем меньше значение, принимаемое c2, тем ближе между собой теоретическое и эмпирическое распределения. Случайная величина c2 имеет известное распределение Пирсона или c2.- распределение.
Критическое значение критерия определяется по таблице распределения критических точек по заданному уровню значимости q и числу степеней свободы f:
f = m-r-1;
где r-число параметров распределения, определяемых по результатам эксперимента. Для нормального распределения r=2, для распределения Пуассона и показательного распределения r=1.
Наблюдаемое значение критерия c2набл рассчитывается по результатам экспериментов
.
Если c2набл<c2кр, то гипотеза H0 принимается, т. е. результаты эксперимента распределены закону А . Если c2набл>c2кр, то H0 -отвергается (критическая область правосторонняя).
6.1 Расчёт теоретических частот для нормального распределения
1. Вычисляем оценки математического ожидания и дисперсии:
![]()
![]()
![]()
2. Вычисляем границы интервалов нормированной переменной Z:
,
i = 0,1,…., m.
Выберем по таблице значения функции Лапласа Ф(Zi);
Найдём вероятность попадания значений нормально распределённой случайной величины Z в i-й частичный интервал:
![]()
Вычисляем
теоретические
частоты:
.
Пример:
Пусть даны результаты 75 экспериментов. Проверить гипотезу о нормальном распределении результатов экспериментов:
| -50 | -39 | -48 | -56 | -49 |
| -44 | -39 | -42 | -56 | -46 |
| -39 | -50 | -52 | -48 | -55 |
| -46 | -37 | -51 | -52 | -45 |
| -46 | -51 | -43 | -49 | -35 |
| -57 | -48 | -42 | -42 | -54 |
| -33 | -44 | -56 | -44 | -43 |
| -41 | -47 | -42 | -47 | -59 |
| -54 | -53 | -55 | -34 | -53 |
| -50 | -36 | -53 | -53 | -55 |
| -54 | -39 | -53 | -42 | -49 |
| -45 | -48 | -50 | -48 | -56 |
| -52 | -46 | -53 | -56 | -57 |
| -42 | -53 | -50 | -44 | -46 |
| -59 | -62 | -57 | -36 | -43 |
| Начало первого интервала: | -64 | ||
| Длина интервала: | 4 | ||
Разобьем
интервал [–64,-32]
на частичные
интервалы с
шагом, равным
4. Для каждого
частичного
интервала
подсчитаем
число результатов,
попавших в
данный интервал.
Обозначим эти
частоты ni.
Вычислим середины
частичных
интервалов
.
Полученные результаты вычислений занесем в таблицу.
Находим оценки
математического
ожидания и
среднего
квадратического
отклонения
(1/75)·(-65-290-972-650-644-788-190-170)
=
= -3566/75=-47.54;
где Y*i – середина i -го интервала.
![]()
(1/74)Ч(209.09+547.058+751.1688+
+78.6708+33.2024+429.6824+455.058+916.658) = =3420.5884/74=46.224 ;
Sy = 6.7988=6.80;
Вычислим границы интервала в кодированных переменных:
.
Вероятность попадания нормально распределённой случайной величины в i-тый частичный интервал
Pi = Ф(Zi+1) - Ф(Zi); i=1,...,m,
где Ф(z) - функция Лапласа.
Вычислим теоретические частоты ni' =NЧPi.
Величины Zi, Pi и ni' заносим в таблицу.
Определим наблюдаемое значение критерия
![]()
Kнабл= 0,9168 + 0,0526 + 4,008 + 0,69 + 0,4303 + 0,1555 + 0,3874 + 0,74137) = 7,38197;
Найдём критическое значение критерия Пирсона для уровня значимости q=0.1 и числа степеней свободы
f=m-2-1=8-2-1=5:
Kкр=c2 (q,f)= c2(0.1;5)=9.236.
Таблица 4.
| № |
|
ni |
|
Z i | Ф(Z i) | Pi | ni1 | ni |
(ni1-ni)2 ni1 |
|
1 2 3 4 5 6 7 8 |
-64 -60 -56 -52 -48 -44 -40 -36 -32 |
1 5 18 13 14 14 5 5 |
-62 -58 -54 -50 -46 -42 -38 -34 |
-Ґ -1.83 -1.24 -0.65 -0.06 0.52 1.11 1.69 +Ґ |
-0.5 -0.4664 -0.3925 -0.2415 -0.0239 0.19847 0.3665 0.45449 0.5 |
0.0336 0.0739 0.1504 0.2182 0.2224 0.1680 0.0880 0.0455 еPi=1 |
2.52 5.54 11.277 16.36 16.679 12.6 6.599 3.41 |
1 5 18 13 14 14 5 5 |
0.9168 0.0526 4.008 0.69 0.4303 0.1555 0.3874 0.74137 |
Так как Kнабл < Kкр , то гипотеза H0 справедлива, т.е. результаты эксперимента распределены по нормальному закону.
7.Проверка гипотезы о согласованности мнений экспертов (априорное ранжирование переменных)
Суть метода состоит в том, что специалистам (экспертам), хорошо знакомым с исследуемым процессом, предлагается расположить факторы в порядке убывания степени их влияния на переменную состояния.
Пусть приглашены m экспертов, которым предложено проранжировать n факторов: x1, x2,...,xn. Обозначим через аij - ранг, выставляемый i-ым экспертом j-му фактору (1Јаij Јn; i=1,...,m; j=1,...,n).
Результаты опроса заносятся в сводную таблицу:
Таблица 5.
| фактор | X1 | X2 | ................ | Xn |
| №спец | ||||
|
1 2 : : : m |
a11 a21 : : : am1 |
A12 a22 : : : am2 |
................ ................ ................ ................ ................ ................ |
A1n a2n : : : amn |
Сумма рангов по строке (сумма рангов, выставляемых конкретным экспертом) для всех строк одинакова
.
Среднее значение рангов в строке: