Слайд 2Содержание
Введение
Генеральная совокупность и выборка
Способы отбора
Статистическое распределение выборки
Эмпирическая функция распределения
Статистические оценки
параметров распределения
Проверка статистических гипотез
Проверка гипотезы о законе распределения генеральной совокупности
Корреляционно-регрессионный
анализ
Слайд 3Введение
Математическая статистика – наука, занимающаяся методами обработки экспериментальных данных, полученных
в результате наблюдений над случайными явлениями. При этом следующие задачи:
описание
явлений – упорядочить статистический материал, представить в удобном для экспериментатора виде (таблица, график, диаграмма);
анализ и прогноз – приближенная оценка интересующих числовых событий (средняя, дисперсия) и погрешности этих величин;
выработка оптимальных решений – в результате возникает задача проверки правдоподобности гипотез, решением которой является принятие или неприятие выдвинутой гипотезы.
Математическая статистика при решении своих задач опирается на размышляющий, оценивающий составляющий, аппарат экспериментатора.
Слайд 4Генеральная совокупность и выборка
Полный набор всех возможных
значений дискретной СВ
называется генеральной совокупностью. N –
объем совокупности.
Однако в реальности провести сплошное обследование нецелесообразно и невозможно. На практике ограничиваются выборкой.
Часть генеральной совокупности из n элементов, отобранных
случайным образом называется выборкой. n ≤ N
Выборка с объемом < 30 называется выборкой малого объема.
Слайд 5Способы отбора
Отбор, не требующий расчленения:
простой, бесповторный
с повторениями
Отбор, при котором вся
генеральная совокупность делится на части
механический
типический
серийный
Простой – отбор, при котором объекты
извлекаются из совокупности по одному.
Механический – генеральная совокупность «механически» делится на группы. Выборка производится с каждой из групп.
Типический – объекты выбирают не из всей совокупности, а из каждой ее типической части.
Серийный – объекты отбираются не по одному, а сериями, которую подвергают сплошному обследованию. Примеры
Для того, чтобы по данным выборки можно было судить об интересующем нас признаке генеральной совокупности, нужно чтобы выборка правильно представляла пропорции генеральной совокупности, т.е. выборка должна быть репрезентативной (представительной). В силу закона больших чисел можно утверждать, что выборка будет репрезентативной, если каждый объект отобран случайно и если все объекты имеют одинаковую вероятность попасть в выборку.
Слайд 6Статистическое распределение выборки
Пусть из генеральной совокупности извлечена выборка, причем значение
x1 встречалось n1 и т.д., xk – nk. Наблюдаемые значения
x называется вариантами, а последовательность вариант, записанных в возрастающем порядке – вариационным рядом. Число наблюдений называется частотами.
Относительная частота наблюдений – отношение
числа наблюдений к объему выборки. Wi=ni/n
Статистическим распределением называют перечень
вариант и соответствующих им частот или
относительных частот.
Пример
Для визуальной оценки выборочного распределения производится группировка данных. Для этого:
располагают значения xi по возрастанию;
весь интервал разбивают на k последовательных непересекающихся интервалов;
подсчитывают числа n1 – количество попавших значений xi в каждый интервал.
Такая таблица называется группированным статистическим рядом.
Слайд 7Эмпирическая функция распределения
Эмпирической функцией распределения (функция
распределения выборки) называетсяF*(x),
определяющую для
каждого значения xотносительную частоту события Xnx/n; nx
– число вариант, меньше x, n – объем выборки.
Свойства.
значения F*(x) [0;1]
F*(x) – функция неубывающая: F*(x2)> F*(x1), если x2> x1
если x1 – наименьшая варианта, F*(x1)=0
если xk – наибольшая, то F*(x1)=1.
В отличие от эмпирической функции, функцию F(x) генеральной совокупности называется теоретической. Различия между ними состоят в том, что F(x) определяет вероятность события XНаглядным изображением статистического ряда распрделения служат полигон и гистограмма.
Полигон – ломаная линия, соединяющая точки (xi;ni).
Гистограмма – ступенчатая фигура, состоящая из прямоугольников, основаниями которых служат интервалы, длиной n , а высотой – величины ni/n.
Если гистограмма является гистограммой частот, то ее площадь равна сумме всех частот, т.е. объему выборки.
Если гистограмма является гистограммой относительных частот, то ее площадь равна сумме всех относительных частот.
Слайд 8Статистические оценки параметров распределения
Точечные оценки
Интервальные оценки
Точность и надежность
Доверительный интервал для
мат.ожидания
Доверительный интервал для оценки дисперсии
Слайд 9Для того, чтобы статистические оценки давали хорошее приближение оценивающих параметров,
они должны удовлетворять условиям:
объем выборки должен быть достаточным для оценивания
оценка
интересующего нас параметра есть случайная величина.
Статистические оценки:
Несмещенные – есть оценка мат.ожидания, которая равна оценивающему параметру;
Смещенные – оценка M(x)≠ оценивающему параметру;
Эффективные – оценка, имеющая при заданном объеме выборки n наименьшую дисперсию;
Состоятельные – оценка, стремящаяся при n→0 по вероятности к оцениваемому параметру.
Слайд 10Точечные оценки
Точечной называют оценку, определяющую одним числом.
Пусть требуется изучить
количественный признак генеральной совокупности. Допустим, удалось установить, какое имеется распределение.
Тогда возникает задача оценки параметров данного распределения.
Пример
Однако чаще всего экспериментатору не известен вид распределения, т.к. он обладает только данными выборки и тогда для оценки параметров нужно найти зависимость этих параметров от наблюдаемых величин.
Генеральная и выборочная средняя
Генеральная и выборочная дисперсии
Слайд 11Генеральная и выборочная средняя
Генеральная средняя – среднее арифметическое
значений генеральной совокупности
– с повторениями
Генеральная средняя есть среднее взвешенное значений
генеральной совокупности с их весами, равными соответствующим частотам.
Если рассматривать x генеральной совокупности как СВ, то
Выборочная средняя – среднее арифметическое значений выборки.
Пусть имеется выборка объема n. Тогда выборочная средняя равна:
Выборочная средняя по данным одной выборки есть определенное число.
Если извлекать другие выборки такого же объема из генеральной совокупности, то выборочная средняя меняется от выборки к выборке.
Выборочная средняя есть несмещенная оценка
генеральной средней.
При увеличении объема выборки n выборочная средняя стремится к генеральной средней.
Слайд 12Генеральная и выборочная дисперсии
Генеральной дисперсией называют среднее арифметическое квадратов
отклонений значений генеральной совокупности от их среднего значения.
Кроме дисперсий для
характеристики рассеивания значений генеральной совокупности вокруг своего среднего пользуются другой характеристикой – средним квадратическим отклонением.
Выборочной дисперсией называют среднее арифметическое квадратов
отклонений наблюдаемых значений выборки от их среднего значения.
– с повторениями
Для оценки рассеивания выборки служит выборочное среднеквадратическое отклонение.
Слайд 13Интервальные оценки
Интервальной оценкой называют оценку,
определяющуюся двумя
концами интервала.
При выборке малого объема точечная оценка может значительно отличаться
от оцениваемого параметра, что приводит к грубым ошибкам. По этой причине при небольшом объеме выборки следует пользоваться другими оценками.
Интервальные оценки позволяют определить точность и надежность оценок.
Слайд 14Точность и надежность
Пусть найденная по данной выборке статистическая характеристика θ*
служит оценкой неизвестного параметра θ генеральной совокупности. Будем считать θ
постоянным числом. θ* будет тем точнее определять параметр θ, чем меньше абсолютная величина разности |θθ*|<ε. Чем меньше ε, тем точнее оценка.
Однако статистические методы не позволяют категорически утверждать, что θ* удовлетворяет условию |θθ*|<ε, а можно лишь говорить о вероятности, с которой это неравенство осуществляется: P(|θθ*|<ε)=β
Надежностью (доверительной вероятностью) оценки θ по θ* называется
вероятность β, с которой осуществляется неравенство |θθ*|<ε.
Обычно надежность оказывается заранее заданным числом, близким к 1. Наиболее частые значения β: 0,95; 0,98; 0,99; 0,999.
Соотношение P(|θ-θ*|<ε)=β означает вероятность того, что интервал (θ*– ε; θ*+ε) заключает в себя (покрывает) неизвестный параметр θ, равна доверительной вероятности β.
Доверительным интервалом называется интервал (θ*– ε; θ*+ε), покрывающий
неизвестный параметр θ с надежностью β.
Иногда вместо доверительной вероятности β используют обратную величину – уровень значимости α = 1–β. Если β – вероятность, что оцениваемый параметр попадет в интервал, α – вероятность, что не попадет. В статистических таблицах указывается именно α.
Слайд 15Доверительный интервал для мат.ожидания
Рассмотрим нахождение доверительного интервала для M(X) нормально
распределенной СВ, т.е. нужно найти такой интервал, чтобы выполнялось следующее
неравенство , т.е. данный интервал ширину 2ε. Он обладает симметрией.
Вероятность того, что определяется:
законом нормального распределения, если известна D(x)=σ2
или распределения Стьюдента, если D(x) неизвестна, а подсчитана ее несмещенная оценка S2.
Критерий Стьюдента определяется таким параметром как степень свободы υ=n–1.
Для расчетов доверительных интервалов для M(X) используют два подхода:
когда D(x) известна
когда D(x) неизвестна
Слайд 16Расчет доверительных интервалов при известной дисперсии
Будем рассматривать выборочную среднюю как
случайную величину. Примем без доказательств, что если СВ Х распределена
нормально, то и выборочная средняя по независимым наблюдениям распределена нормально. P(|X–M(x)|<ε)=2Φ(х)=β.
Таким образом для нормального распределения 2Φ(х)=β.
Параметр t в функции Лапласа:
Таким образом для отыскания границ доверительного интервала:
по таблицам функции Лапласа находим значение аргумента t, для которого Φ(t)=β/2.
зная значение t из условия находим ε (граница интервала):
Записываем доверительный интервал:
Пример
Слайд 17Расчет доверительных интервалов при неизвестной дисперсии
Если D(x) неизвестна, а ее
несмещенная оценка S2, то в этом случае β покрытия M(x)
интервалом вычисляют по закону распределения Стьюдента со степенью свободы υ=n–1 и α=1–β.
Имеются таблицы, которые по заданным уровням значимости и степеням определяют значения критерия Стьюдента tα,υ по формуле
Таким образом доверительный интервал для М(х) при неизвестной дисперсии строится в виде
Данный интервал определяет, что с доверительной вероятностью β он покрывает истинное значение М(х).
Пример
Слайд 18Доверительный интервал для оценки дисперсии
Доверительный интервал строится на основании того,
что величина (n–1)S2/σ распределена по закону «хи-квадрат»(χ2) со степенями υ=n–1.
Выборочная
дисперсия D(x) и нормального распределения связаны следующим соотношением:
χ= (n–1)S2/σ
χ2 σ2= (n–1)S2
Для заданной доверительной вероятности β или, что тождественно, для заданного уровня значимости α=1–β. Потребуем, чтобы выполнялось следующее соотношение
P(χ2 α/2,υ <δ)= P(χ2 1–α/2 <δ)= α/2; δ2< χ2 α/2, υ <δ2
Из этого соотношения следует, что границы доверительного интервала в явном виде выглядят следующим образом:
Пример
Слайд 19Проверка статистических гипотез
Статистической гипотезой называют, гипотезу о видах неизвестного распределения
или о параметрах известного распределения.
Проверка статистической гипотезы заключается в сопоставлении
некоторых статистических показателей, вычисленным по данным выборки со значениями этих же показателей, определенными теоретически в предположении, что проверяемая гипотеза верна.
Классификация гипотез.
В результате проверки могут быть приняты два неправильных решения, т.е. допущены ошибки двух родов.
Ошибка первого рода состоит в том, что будет отвергнута правильная гипотеза.
Ошибка второго рода состоит в том, что будет принята неправильная гипотеза.
Вероятность совершить ошибку первого рода принято обозначать α. На практике, наиболее часто используют α=0,05, это означает, что в 5 случаях из 100 имеется риск допустить ошибку первого рода, т.е. отвергнуть правильную гипотезу.
Статистический критерий, статистическая область
Сравнение двух дисперсий
Сравнение математических ожиданий
Проверка гипотезы о равенстве средних при и известных дисперсиях
Проверка гипотезы о равенстве средних при неизвестных дисперсиях
Слайд 20Классификация гипотез
Статистические, нестатистические
Выдвинутая, конкурирующая.
Выдвинутую гипотезу называют нулевой (основной) и обозначают
Н0. Конкурирующая гипотеза Н1 – это гипотеза альтернативная нулевой, т.е.
противоречащая основной. Пример
По количеству предположений: простые, сложные.
Простая – это гипотеза содержащая только одно предположение. Сложная – гипотеза состоящая из конечного или бесконечного числа простых гипотез.
Слайд 21Статистический критерий, статистическая область
Для проверки Н0, используют специально подобранную слу-чайную
величину, точное или приближенное значение которой из-вестно. Эту величину обозначают
через U или Z, если она распреде-лена нормально; F или υ² - по закону Фишера; χ² - по закону «хи квадрат»; Т или t - по распределению Стьюдента.
Статистическим критерием называют случайную величину служащую для проверки Н0.
Наблюдаемым значением критерия называют, значение критерия выраженное по данным выборки.
После выбора определенного критерия, множество всех его возможных значений разбивается на два подмножества:
содержит значения критерия при котором Н0 отвергается;
содержит значения критериев при которых Н0 принимается.
Слайд 22Критической областью называют, совокупность значений критерия при которых Н0 отвергается.
Областью
принятия гипотезы (областью допустимых значений), называют совокупность критерия при которой
Н0 принимают.
Основной принцип проверки статистических гипотез: если наблюдаемое значение критерия принадлежит критической области, то гипотезу отвергают; если наблюдаемое значение критерия принадлежит области покрытия гипотезы, то гипотезу принимают.
Критическая область и область покрытия гипотез – это интервалы, следовательно существует точка которая их разделяет.
Критической точкой (границей), называют точку определяющую критическую область от области принятия гипотез.
Различают:
1. Одностостороннюю критическую область
левостороннюю
правостороннюю
2. Двустороннюю критическую область
Слайд 23Правостороннюю называют критическую область определяемую неравенством К>Ккр
Левостороннюю называют критическую область
определяемую неравенством К
К<Кı и К>К2; Кı>К2
При отыскании критической области задают α (уровень значимости) и ищут критические точки исходя из требований, что критерий К примет значение лежащее в критической области, при этом вероятность такого события равна принятому уровню значимости α, т.е. для правосторонней области Р(К>Ккр)= α; для левосторонней области Р(К<Ккр)= α; для двусторонней области Р(К>|Ккр|)= α/2
Если наблюдаемое значение критерия принадлежит критичес-кой области, нулевую гипотезу отвергают, если не принадлежит, то нет оснований отвергать Н0.
Для многих критериев составлены таблицы:
Стьюдента;
χ²;
Фишера
Слайд 24Сравнение двух дисперсий
Рассмотрим гипотезу о параметрах нормального распределе-ния. Пусть имеется
две серии опытов, регистрирующая значение некоторой случайной величины.
Х: х1, х2
… хn
Y: y1, y2 … уn
Осуществим проверку нулевой гипотезы о равенстве диспер-сий при неизвестных математических ожиданиях.
Н0: Dx =Dy
Постановка задачи.
Пусть даны две случайные величины Х и Y, распределенные нормально. По данным выборки объем их nx и ny подсчитаны выбо-рочные дисперсии S, Sтребуется.
Механизм проверки.
Цель работы при заданном уровне значимости α проверить ну-левую гипотезу о равенстве дисперсий.
Такая задача возникает при сравнении точности двух прибо-ров, или при сравнении различных методов измерения. Т.е. когда выборочные дисперсии отличаются, возникает вопрос значимости или не значимости это различие.
Если различие неразличимо, то имеет место нулевая гипотеза, т.е. приборы, например имеют одинаковую точность. А различия вы-борочных дисперсий объясняется случайными причинами.
Слайд 25Механизм проверки
По данным выборок значений nх и nу, вычисляют наблюдаемое
значение критерия как отношение большей дисперсии к меньшей:
Критическая область строится
в зависимости от конкурирующей гипотезы. По таблицам распределения Фишера, по заданному уровню значимости α и вычисленным степеням свободы υx, υy находят табличное значение критерия:
для альтернативной гипотезы Н1: Dx >Dy
Fкр в зависимости от параметров Fкр (α, υx, υy)
для альтернативной гипотезы Н1: Dx ≠ Dy
Fкр в зависимости от параметров Fкр (α/2, υx, υy)
Если Fнаб >Fкр, то Н0 отвергают.
Если Fнаб Пример
Слайд 26Для проверки гипотезы, соответствие двух выборок принад-лежности к одной и
той же генеральной совокупности, рассмотрим вопрос о значимости расхождений между
выборочным значением математических ожиданий. Выдвинем нулевую гипотезу о равенстве математических ожиданий.
Н0: Мx =Мy
Тестирование такой гипотезы основано:
на нормальном распределении в случае большого объема выборок (n>30), когда дисперсии считаются известными
на распределении Стьюдента в случае малого объема выборок (n<30) когда дисперсии являются неизвестными.
Сравнительные графики плотностей распределения нормального и Стьюдента приведены на рисунке:
синей и розовой линиями показано
распределение Стьюдента,
красной – нормальное
Сравнение мат.ожиданий
Слайд 27Для того чтобы при заданном уровне значимости α =0.05 проверить
нулевую гипотезу Н0: Мх=Му о равенстве математических ожиданий двух больших
нормальных выборок с известными дисперсиями Dх и Dу, необходимо:
Вычислить наблюдаемое значение критерия:
Построить критическую область в зависимости от конкурирую-щей гипотезы:
при конкурирующей гипотезе Н1: Мх ≠ Му по таблице функции Лапласа находят критическую точку zкр из равенства Ф(zкр) = (1 – α) /2.
Если |Zнабл| < zкр, то нет оснований отвергать нулевую гипотезу.
Если |Zнабл| > zкр, то нулевую гипотезу отвергают.
при конкурирующей гипотезе Н1: Мх > Му по таблице функции Лапласа находят критическую точку zкр из равенства
Ф(zкр) = (1 – 2α) /2.
Если Zнабл < zкр, то нет оснований отвергать нулевую гипотезу.
Если Zнабл > zкр, то нулевую гипотезу отвергают.
при конкурирующей гипотезе Н1: Мх < Му по таблице функции Лапласа находят «вспомогательную критическую точку» zкр из равенства
Ф(zкр) = (1 – 2α) /2.
Если Zнабл > - zкр, то нет оснований отвергать нулевую гипотезу.
Если Zнабл < - zкр, то нулевую гипотезу отвергают.
Проверка гипотезы о равенстве средних при известных дисперсиях
Слайд 28Проверка гипотезы о равенстве средних при неизвестных дисперсиях
Постановка задач: пусть
генеральные совокупности распределены нормально, причем их дисперсии Dx и Dy
заранее не известны. Взяты две выборки малого объема, требуется сравнить средние этих генеральных совокупностей.
Методика проверки задач: заключается в использовании критерия Стьюдента при условии, что генеральные дисперсии не известны, однако в предположении, что они равны между собой.
Такая задача возникает: если сравниваются средние размеры двух партий деталей, изготовленных на одном и том же станке. Естественно будет предположить, что дисперсии контролируемых размеров одинаковы.
Алгоритм проверки
Слайд 29Алгоритм проверки
1) Прежде чем сравнивать средние требуется проверить Н0: Dх=Dу
2) Если гипотеза подтвердилась нужно вычислить наблюдаемое значение критерия:
3) Строим
критическую область в зависимости от конкурирующей гипотезы
а) Если Н1: Мх ≠ Му – двусторонняя критическая область строится исходя из условия чтобы вероятность попадания наблюдаемого значения критерия в эту область была равна принятому уровню значимости α взятого из таблицы Стьюдента для числа степеней свободы в верхней части таблицы, т.е. для двусторонней критической области при условии |Тнабл| < tкр(α,υ), то нет основания отвергать нулевую гипотезу; если |Тнабл| > tкр(α,υ), то нулевую гипотезу отвергают.
б) Если Н1: Мх >Му строится правосторонняя критическая область, а критическую точку находят по таблице Стьюдента из нижней части.
Если Тнабл < tкр, то нет основания отвергать нулевую гипотезу .
Если Тнабл > tкр, то нулевую гипотезу отвергают.
в) При конкурирующей гипотезе Н1: Мх < Му по таблице критических точек распределения Стьюдента, по заданному уровню значимости α,помещенному в нижней строке таблицы ,и числу степеней свободы k= nх + nу–2 найти «вспомогательную критическую точку» tкр односторонней критической области.
Если Тнабл < - tкр, то нет основания отвергать нулевую гипотезу.
Если Тнабл > - tкр, то нулевую гипотезу отвергают.
Тнабл и число степеней свободы.
Слайд 30Проверка гипотезы о законе распределения генеральной совокупности
Если закон распределения не
известен, но есть основание предположить, что он имеет определенный вид
(А), то проверяют нулевую гипотезу:
Н0: генеральная совокупность распределена по закону А.
Проверка гипотезы о предполагаемом законе распределения производится так же как и проверка гипотезы о параметрах распределения, т.е. при случайно отобранной случайной величине – критерия согласия.
Критерием согласия называют критерий проверки гипотезы о
предполагаемом законе распределения.
Имеется несколько критериев согласия:
критерий Пирсона;
критерий Колмогорова;
критерий Смирнова.
Слайд 31Критерий Пирсона
Пусть по выборке объема n получены эмпирические частоты, т.е.
мы имеем предполагаемое распределение.
Допустим, что в предположении нормального распределения генеральной совокупности вычислены теоретические частоты ().
При уровне значимости α требуется проверить гипотезу: генеральная совокупность распределена нормально.
В качестве критической проверку нулевой гипотезы примем случайную величину:
(*)
Эта величина случайная, т.к. в различных опытах она принимает различные, заранее не известные, значения. Чем меньше различаются эмпирические и теоретические частоты, тем меньше величина критерия => он характеризует близость эмпирических и теоретических распределений.
Доказано, что при закон распределения случайной величины (*) не зависит от того, какому закону распределения подчинена генеральная совокупность, а стремится к закону распределения χ2 с числом степеней свободы: υ=k–1–r , где
k – число групп (интервалов) выборки
r – число параметров предполагаемого распределения.
А т.к. для нормального распределения нам интересно М(х) и D(x), то число степеней свободы определяется υ=k–3
Правила проверки.
Слайд 32Правила проверки
Для того, чтобы при заданном уровне значимости α проверить
Н0: “генеральная совокупность распределена нормально”, необходимо:
вычислить теоретические частоты;
вычислить наблюдаемое значение
критерия:
по таблицам критических точек распределения χ2 по заданному уровню значимости и числу степеней свободы υ=k–3, найти критическую точку: χ2кр=(α,υ);
сравнить 2 имеющихся критерия:
- если χ2набл< χ2кр - нет основания отвергать нулевую гипотезу о нормальном распределении.
- если χ2набл > χ2кр - нулевую гипотезу о нормальном распределении отвергают.
Замечание:
объем выборки должен быть достаточно велик (более 50);
малочисленные группы следует объединять в одну, суммируя частоты;
т.к. возможные ошибки первого и второго рода, то в окончательном выводе следует проявить осторожность:
можно повторить опыт;
увеличить число наблюдений;
для проверки воспользоваться другими критериями;
построить график распределения;
вычислить эксцесс и асимметрию.
для контроля вычислений формулу преобразуют к виду
Слайд 33Корреляционно-регрессионный анализ
Корреляционная зависимость
Корреляционный момент
Коррелированность и зависимость случайных величин
Выборочное корреляционное отношение
Простейшие
случаи криволинейной корреляции
Метод наименьших квадратов
Слайд 34Во многих задачах требуется установить или оценить зависимость изучаемо случайной
величины Y от одной или нескольких других случайных величин.
Две случайные
величины могут быть связаны:
- функциональной зависимостью
- статистической
- независимой
Строгая функциональная зависимость реализуется редко, т.к. обе случайных величины или одна подвержены действию других случайных величин.
Статистической называется зависимость, при которой
изменение одной из величин влечет изменение распределения
другой.
В частности она проявляется в том что изменение одной из величин влечет изменение среднего значения другой. Такая статистическая зависимость называется корреляционной.
Слайд 35Корреляционная зависимость
Предположим изучается связь между случайными величинами Х и Y.
Пусть каждому значению Х соответствует несколько значений Y.
Условным средним
называется среднее арифметическое случайной величины Y соответствующее значению случайной величины Х равное х.
Если каждому значению Х соответствует одно значение , то очевидно что она – функция от х. В этом случае говорят, что случайная величина Y зависит от Х корреляционно.
Корреляционной зависимостью Yx называют функциональную зависимость от значений х. = f(x) - уравнение регрессии Y на Х, а график – линией регрессии Y на Х. f(x) – функция регрессии.
Аналогично определяется условная средняя Х на Y: = f(y).
Две основные задачи теории корреляции:
Оценить тесноту (силу) корреляционной связи
Если связь существует, то нужно установит ее форму – вид функциональной зависимости между и величиной Х.
Для решения первой задачи существует коэффициент корреляции.
Слайд 36Коэффициент корреляции.
Выборочным коэффициентом корреляции называется отношение разности между М(Х) произведения
случайных величины и произведением математических ожиданий этих случайных величин к
σ² случайных величин X и Y.
Он служит для оценки тесноты линейной корреляционной зависимости.
Свойства коэффициента корреляции
rв по абсолютной величине ≤ 1
Если rв= 0, то Х и Y не связаны линейной зависимостью, а другая может при этом существовать.
Если |rв| = 1, то Х и Y связаны строго корреляционной зависимостью.
Т.к. rв характеризует степень тесноты линейной связи, то она проявляется в том, что при возрастании одной случайной величины другая имеет тенденцию возрастать, т.е. наблюдается положительная корреляция, rв>0; если при возрастании одной случайной величины другая – убывает, rв<0.
Remark: Зависимость тем ближе к линейному закону, чем |rв| ближе к единице.
Для описания системы двух случайных величин или зависимости между двумя случайными величинами, кроме математического ожидания и дисперсии используют и другие величины. Коэффициент корреляции rв является частным случаем такой характеристики, более частным случаем выступает корреляционный момент μху.
Слайд 37Корреляционный момент
Корреляционным моментом μху случайных величин Х и Y,
называют математическое ожидание при отклонении этих
величин.
μху = М [(Х
– М(Х))*(Y – М(Y))]
μху = М (Х*Y) – М(Х)*М(Y)
rв = μху / σх*σу
Свойства корреляционного момента:
корреляционный момент служит для характеристики связи между случайными величинами Х и Y;
корреляционный момент двух независимых величин равен нулю;
корреляционный момент имеет размерность равную произведению размерности величин Х и Y;
размерность корреляционного момента является недостатком при сравнении зависимости двух случайных величин, чтобы избежать это, был введен коэффициент корреляции.
Слайд 38Коррелированность и зависимость случайных величин
Две случайных величин называются коррелированными, если
их корреляционный момент (или что то же самое коэффициент корреляции)
равен нулю;
Х и Y называются некоррелированными случайными величина-ми, если их корреляционный момент равен нулю;
Две коррелированные величины также зависимы. Обратное предположение не всегда имеет место.
Слайд 39Выборочное корреляционное отношение
Для оценки тесноты нелинейной корреляционной связи служат такие
характеристики как: выборочное корреляционное отношение ηух (игрек к икс) и
ηху (икс к игрек).
Выборочным корреляционным отношением называется, отношение межгруппового
среднеквадратического отклонения к общему среднеквадратическому отклонению.
ηух = σмехгр / σобщ
Свойства корреляционного отношения:
если корреляционное отношение равно нулю, Х и Y не связаны друг с другом;
если корреляционное отношение = 1, Х и Y не связаны корреляционной зависимостью;
значение корреляционного отношения удовлетворяет двойному неравенству 0 ≤ ηух ≤ 1;
корреляционное отношение всегда меньше или равно коэффициенту корреляции ηух ≤ |rв|.
Слайд 40Достоинства корреляционного отношения.
Корреляционное отношение служит мерой тесноты связи любой, в
том числе и линейной. В этом его достоинство перед коэффициентом
корреляции, который оценивает степень тесноты только линейной связи.
Недостатки корреляционного отношения.
Корреляционное отношение не позволяет судить на сколько близко расположены точки найденным по данным наблюдения к кривой определенного вида (гипербола, парабола, синусоида и т.д.). Это объясняется тем, что при определении корреляционного отношения вид связи не учитывается.
Слайд 41Простейшие случаи криволинейной корреляции
Если график регрессии Y на Х изображен
кривой линией, то корреляция называется криволинейной.
Примеры функции регрессии
Параболическая корреляция второго
порядка = ах² + вх + с
Параболическая корреляция третьего порядка =а+вх²+сх + d
Гиперболическая = а/х + в
Для определения вида функции регрессии строят на графике точки с координатами (х, ). По их расположению делают заключение о примерном виде функции регрессии.
При окончательном решении принимают во внимание особенности, вытекаемые из сущности решаемой задачи.
Теория криволинейной корреляции решает те же задачи что и теория линейной корреляции, т.е. устанавливает формы и тесноты корреляционной зависимости.
Неизвестные параметры уравнения регрессии ищут методом «наименьших квадратов».
Слайд 42Метод наименьших квадратов
Метод наименьших квадратов заключается в том, что сумма
квадратов отклонений теоретических данных от экспериментальных, должна быть наименьшей.
Будем искать
уравнение регрессии в виде у = f(x).
Предположим, что имеет место линейная зависимость φ(х)= а0 +а1х
а0, а1 – коэффициенты линейной зависимости
φ(х) – предполагаемая теоретическая зависимость
Используя метод наименьших квадратов построим функцию равную сумме квадратов отклонений экспериментальных данных от теоретических данных:
По методу наименьших квадратов для нахождения коэффициентов а0, а1, необходимо составить систему двух уравнений, для этого необходимо взять частные производные от функции S и приравнять их к нулю.
Учитывая число функций φ(х)=а0+а1х
Окончательной системой уравнений по методу наименьшего квадрата имеет вид
Решая полученную систему найдем неизвестные коэффициенты а0 и а1, запишем уравнение регрессии в виде φ(х) = а0 + а1х
Слайд 43Для того чтобы найти погрешность данного метода необходимо вычислить
Если
предположили нелинейную корреляцию, то уравнение связи пытаемся искать в виде
φ(х)=а0+а1х+а2х²,
то аналогично по методу наименьших квадратов найдем функцию
Находим частные производные данной функции
Запишем систему уравнений
Аналогично находим а0, а1, а2 и записываем уравнение регрессии в виде φ(х)=а0+а1х+а2х²
Определяем погрешность с помощью ε.
Заключение о реальной зависимости между случайными величинами Х и Y делаем путем графического представления.
Слайд 44Если нужно отобрать 20% изготовленных деталей, то отбирают каждую пятую.
Детали
изготавливаются на разных станках. Выборка производится с каждого станка.
Изделия изготавливаются
станками-автоматами. Обследованию подвергается продукция нескольких автоматов.
Слайд 45Задано распределение частот выборки.
Определить объем, написать распределение относительных частот.
n=3+10+12=20
Σ Wi=1
Σ
ni=n
Слайд 46Пусть имеется нормальное распределение. Тогда нужно оценить, найти M(x) и
σ. Для показательного распределения нужно оценить параметр λ. f(x)= λ.e-λx.
Слайд 47Найти доверительный интервал с надежностью 0.9 неизвестного M(X) нормально распределенной
СВ Х, если известны =20.9, σ=2, n=16, β=0.9.
2Φ(t)=σ
Φ(t)=β/2=0.45
t=1.645
=0.82
(20.9–0.82; 20.9+0.82)
(20.08; 21.72)
Слайд 48По данным выборки, объема 50, найдена =-0.155, S=936. Найти
доверительный интервал для неизвестной дисперсии, β=0.95. n=50, υ=49, α=0.05.
По таблицам
распределения Стьюдента для уровня значимости α=0.05 и числа степеней свободы υ=49 найдем значение критерия Стьюдента tα,υ=2.009
Запишем значение границы интервала =0.27
Запишем границы доверительного интервала (-0.425;0.115).
С вероятностью 0.95 истинное значение М(х) лежит в пределах (-0.425;0.115).
Слайд 49При доверительной вероятности 90% найти доверительный интервал для D(x), если
для выборки, объемом 5 выборочная D(x)=6.6, а выборочная средняя 0.4.
По
таблицам распределения χ2 найдем значение критерия χ2 для уровня значимости υ=4 и α=/2=0.05
χ20.05,4=9.5
χ2 α/2,υ = χ20.95,4=0.711
4.6.6/9.5 < σ2 < 4.6.6/0.711
2.78 < σ2 < 37.13
Слайд 50Если Н0 состоит в предположении, что математическое ожидание М(Х) нормального
распределения равно 10, то Н1 может состоять в предположении, что
М(Х) не равно 10.
Н0: М(Х)=10
Н1: М(Х)≠10
Слайд 51По двум малым независимым выборкам объемов nx=11 и ny=14 из
нормальных распределений найдены исправленные выборочные дисперсии S²x =0.76 и S2y=0.38.
При уровне значимости α=0.05 проверить нулевую гипотезу Н0: Dx=Dy о равенстве диспер-сий при конкурирующей гипотезе Н1: Dx>Dy.
Решение: Найдем отношение большей исправленной дисперсии к меньшей:
Fнабл = S²б / S²м = 0.76 / 0.38 = 2
По условию конкурирующая гипотеза имеет вид Н1: Dx>Dy, поэтому критическая область – правосторонняя. По таблице критических то-чек распределения Фишера, по уровню значимости α=0,05 и числам степеней свободы k1 = nx – 1 = 11 – 1 = 10 и
k2 = ny – 1 = 14 – 1 = 13 находим критическую точку:
Fкр (α, kı, k2) = Fкр (0.05,10,13) = 2.67
Так как Fнабл = 2. < Fкр = 2.67, то нет оснований отвергать Но о равенстве дисперсий. Другими словами, исправленные выборочные дисперсии различаются незначимо.