Слайд 1Методология и методы социологического исследования.
Количественные методы
Мацкевич М.Г., к.с.н.
mmatskevich@yandex.ru
Лекция
1
Конструирование модели. Дизайн опроса. Создание измерительных инструментов
Слайд 2План лекции
Типы отношений в причинно-следственных моделях
Измерительная модель
Валидность конструкта
Дизайны
опросного исследования
Создание измерительных инструментов
Инвариантность измерения
Получение индикаторов
Слайд 4Условия появления причинно-следственных связей (causality)
Причина должна предшествовать следствию во времени
Время
между изменением Х, которое приводит к изменению У, может варьировать
(от немедленного эффекта до нескольких лет, десятилетий, веков). Пример: старение населения в России и других странах; разрушение памятников Конфедерации в южных штатах Америки
Природа и/или сила воздействия Х на У может меняться в зависимости от контекста (влияние может отсутствовать в одном контексте и присутствовать в другом). Пример: роль интернета в росте доверия в разных странах; связь высокого уровня алкоголизма в обществе и уровня преступности и смертности
Причина и следствие должны определенным образом взаимодействовать – в пространстве или через цепочку опосредующих событий (факторов)
Слайд 5Типы причинно-следственных отношений
Прямая причинно-следственная связь (direct causal relationship)
Х
Y
2. Непрямая (indirect) причинно-следственная связь (mediating effect, partial/complete)
X
Z Y
3. Ложная (spurial) связь
Z
X Y
Слайд 6Типы причинно-следственных отношений (продолжение)
4. Двусторонняя (bi-directional) п.-с. связь
X
Y
5. Модерированная (moderated) п.-с. cвязь
6. Неанализируемая (unanalyzed)
п-с. cвязь
X Y
Z
X Y
Слайд 7Измерительные модели
Большинство переменных, используемых в социологическом измерении носят неявный, латентный
характер и не могут быть наблюдаемы и измерены непосредственно.
Поэтому разрабатывают
специальную шкалу, систему индикаторов, которые позволяют измерить латентную переменную через набор явных, наблюдаемых переменных (с учетом ошибки измерения, в идеале – минимальной)
Слайд 8Измерение в социологии
Процедура
приписывания значений,
принадлежащих элементам
эмпирической системы
сконструированным
элементам
символической системы
Эмпирическая
система
Символическая
система
Очевидно, что для измерения таких характеристик как пол,
возраст, цвет волос или рост не требуются никакие сложные схемы и процедуры. Но социологов обычно не интересует измерение этих характеристик.
А вот измерение таких характеристик как «удовлетворенность работой», «склонность к девиантному поведению» или «социальный статус» не имеют простого выражения и требует конструирования признаков, т.е. разработки некоторой символической системы и процедуры перевода набора явных показателей в значения латентной переменной.
Слайд 9Измерение в социологии
Как правило, предполагается, что связь латентной и наблюдаемых
переменных – линейная (не обязательно)
Измерительная модель – способ проверки
теории
Измерительная модель определяет, что мы измеряем. Какие переменные включаем в наблюдение, какие индикаторы используем.
Взаимосвязи в измерительной модели выражаются в математической форме (напр., линейные уравнения)
Слайд 10Теоретическая модель конструкта социального и политического доверия (используется в ESS
- European Social Survey)
Слайд 11Дизайн исследования (способ сбора данных, измерения и анализа)
Программа
социологического
исследования
Проект выборки
и
ее обоснование
Выбор методов
анализа информации
Обоснование методов
сбора информации
Объект и
предмет исследования
Основные понятия
исследования
Цель и задачи
исследования
Процедурная
часть программы
Методологическая
часть программы
Разработанная
система гипотез
Инструментарий,
план, бюджет проекта
Формулировка
проблемы
Предварительный системный
анализ (моделирование
исследовательской проблемы)
Слайд 12Программа исследования
Методологическая часть программы исследования включает описание того, «что должно
быть получено (достигнуто)».
Чем определяется потребность в исследовании.
Чего нужно добиться в
ходе исследования (какова цель исследования) и что для этого нужно сделать (задачи исследования).
На какие вопросы должно ответить исследование (система гипотез исследования), как понимаются основные понятия, использующиеся в программе исследования.
Процедурная часть программы описывает «как будут получены (достигнуты) требуемые результаты».
Как будут отбираться те «единицы» (люди, документы, другие объекты), которые будут исследоваться
Какой метод сбора информации будет использован.
Как будет проводиться обработка полученной информации и что получится в результате.
Слайд 13Определение характера исследования
Определение
предмета
исследования
Формулировка
основных гипотез
Определение
объекта
исследования
Определение
характера
исследования
Определение
предмета
исследования
Формулировка
основных гипотез
Определение
объекта
исследования
Объект исследования.
Совокупность тех
объектов (людей, социальных групп, документов), которые являются «носителями» интересующей нас информации.
Предмет исследования.
Те «особенности» объекта исследования (поведение, мнения, предпочтения) которые мы изучаем в ходе проекта.
Гипотезы
Сформулированные нами предположения, которые мы проверяем в ходе исследования.
Гипотезы могут быть «описательными» (о фактах) и «аналитическими» (о причинах).
Слайд 14Формирование системы гипотез
Система гипотез исследования.
Предположения об объекте, в которых
находят выражение задачи исследования.
По итогам исследования гипотезы либо отвергаются, либо
принимаются.
Гипотезы могут быть «научными» и «статистическими».
Слайд 15Работа с ключевыми понятиями
Ключевые понятия.
Основные категории и понятия, которые используются
при разработке исследования.
Интерпретация ключевых понятий необходима для того, чтобы Заказчик
и Исполнитель одинаково понимали, о чем идет речь.
Операционализация понятий.
Методика расчета значений, которые присваиваются понятиям и определяются в ходе исследования.
Инструментализация понятий.
Указание правил, по которым понятия «выражаются» в инструментарии исследования.
Определение
основных понятий
исследования
Операционализация
ключевых понятий
Инструментализация
ключевых понятий
Выделение
ключевых понятий
Слайд 16Дизайн опроса.
Типы измеряющих признаков
«Закрытый вопрос» - вопрос с предлагаемыми
вариантами ответов, из которых нужно выбрать один или несколько.
Как правило,
используются в количественных исследованиях (методы анкетирования и формализованного интервью).
Различаются одноальтернативные (допускающие один ответ) и многоальтернативные закрытые вопросы.
Тип вопроса влияет на способ обработки данного признака, а также на способ хранения информации в массиве.
Закрытые
одноальтернативные вопросы
Закрытый
многоальтернативный вопрос
Слайд 17Типы измеряющих признаков
«Открытый вопрос» - предполагает, что ответ формулирует сам
респондент.
Ответы на «открытые» вопросы позволяют прояснить неопределенную ситуацию, либо
тогда, когда хотят стимулировать респондента к самостоятельной работе. Чаще используются в качественных и разведывательных исследованиях.
Трудоемкость обработки открытых вопросов значительно выше, чем закрытых.
Открытый вопрос в количественном исследовании
Открытый вопрос в качественном исследовании (фрагмент сценария фокус-группы)
Слайд 18Типы измеряющих признаков
Вопросы, в которых объединены признаки одноальтернативных и многоальтернативных,
открытых и закрытых вопросов.
Табличные вопросы с единым списком вариантов
ответов.
«Полузакрытые» вопросы с альтернативой «Другое» (и необходимостью записать, что именно указал респондент).
Вопросы с сортировкой ответов и т.д.
Группа одноальтернативных и многоальтернативных вопросов с единым набором ответов
Слайд 19Какой вопрос – такой и ответ
Какие из вопросов сформулированы корректно?
Почему
другие некорректны?
А какие шкалы построены правильно?
Почему другие неправильно?
Слайд 21Критерии качества измерения
Надежность (устойчивость) – степень воспроизводимости результатов измерения в
случае его повторения при тех же условиях, т.е. получение одинаковых
результатов для каждого объекта измерения
Валидность (достоверность) – степень, в которой шкала соответствует цели измерения и отражает содержание измеряемого концепта.
Надежность - воспроизводимость
Валидность – соответствие
шкал концепту
Слайд 22Надежность измерения
Надежность измерения количественно определяется как отличие дисперсии проведенного измерения
от дисперсии в случае идеального (невозмущающего) измерения
Такого невозмущающего измерения не
существует. Поэтому данная формула не используется
Дисперсия ошибки
Дисперсия идеального наблюдения
Слайд 23Методы измерения надежности
Метод
альтернативных форм
Метод
расщепления шкалы
Анализ внутренней
конститентности шкалы
Модификация
инструмента
Модификация
времени измерения
Модификация
регистратора
Модификация
объекта
Тест-ретест
Метод подвыборок
Метод подвыборок
Использование нескольких
подвыборок для получения
аналогичной информации
Слайд 24Метод альтернативной формы
Один и тот же объект
Слайд 25Метод расщепления шкалы
Коэффициент корреляции
нужно рассчитывать
с поправкой
Поправка Спирмена -
Брауна
Тестируемая шкала расщепляется на две симметричные части
Слайд 26Тест альфа (Ли Кронбаха)
Один и тот же объект
Число значений
шкалы
Мы можем увеличить консистентность шкалы, если поочередно удаляя отдельные значения
шкалы, получим наиболее высокие значения коэффициента
Слайд 27Тест – ретест
Одна и та же
группа респондентов
через 2-3 недели
Две
волны тестирования на одной и той же группе респондентов
Слайд 28Метод подвыборок
Подвыборка 1
Общая выборка делится на две подвыборки
Обычно –
равные, чтобы получить наибольшую точность
Подвыборка 2
Слайд 29Метод альтернативного регистратора
На 2 интервьюера приходится не менее 30 респондентов
Различия
определяются на основании критерия Стъюдента
Объект измерения
Интервьюер 1 (респ. 1,2)
Интервьюер 2
(респ. 3,4)
Интервьюер 3 (респ. 5,6)
Слайд 30Метод альтернативных способов сбора
Различия оцениваются на основе парных коэффициентов корреляции
Объект
измерения
Анекетирование
Интервьюирование
Телефонное интервью
Онлайн опрос
Слайд 31Достоверность (валидность) шкалы
Валидность
Внешняя согласованность
с другими признаками
(доходы – рубли)
Прогностическая
– адекватность
будущим событиям
(прогноз явки на выборы)
Внутренняя согласованность
внутри
того же признака
Адекватность текущим
внешним критериям
(оценки в вузе ЕГЭ)
Конструктная
(внутренняя и внешняя
согласованность)
Содержательная
(соответствие предмету)
Критериальная
(соответствие
внешним критериям)
Внешняя валидность – сравнение
с другими исследованиями
Слайд 32Точность и достоверность измерения
Полнота охвата – шкала должна позволять
каждому объекту приписать определенное (числовое) значение
Непротиворечивость – отнесение объекта только
к одному шкальному значению
Одномерность (гомогенность) – наличие единого основания классификации, шкала не должна смешивать разные переменные
Равномерность (линейность) – расстояние от одной позиции до другой по шкале должно быть примерно одинаковым
Точность – степень чувствительности шкалы, оптимальная дробность, дающая устойчивое измерение без систематической погрешности
Слайд 33Качество измерения
Инвариантность – показатель оценки устойчивости и неизменности структурных
связей объекта в разных контекстах
Статистическая инвариантность - проверка концептуальной и
процедурной эквивалентности
Процедурная инвариантность – инвариантность измерения. Измеряем ли мы одно и то же в разных странах?
пример – социальное и политическое доверие как единый конструкт; кросс-национальные исследования (Европа: постсоветские страны; Европа vs Ближний Восток)
Слайд 34Инвариантность измерения
Инвариантность измерения подтверждается, если отношения между индикаторами и латентным
конструктом идентичны во всех группах. Этот тип инвариантности определяется равенством
факторной структуры и соответствующих статистических параметров (напр., нагрузок, интерсептов (констант) и т. д.) между группами.
Модель тестирования инвариантности - общая факторная модель, в которой наблюдаемый показатель отражает основную латентную переменную. В свою очередь, латентная переменная является причиной ответа на конкретный вопрос, а следовательно, объясняет изменение показателя и ковариации между несколькими индикаторами.
Слайд 35Получение индикаторов
Социальный индикатор в общем смысле – показатель
Индикатор в социологическом
исследовании – элемент измерительного инструмента
Переход от теоретических конструкций к эмпирическим
показателям (доступным для наблюдения и отражающим характеристики объекта). Должны преобразоваться в вопросы анкеты, интервью и т.д. (с учетом особенностей восприятия респондентом)
Показатель может быть выражен рядом индикаторов
Слайд 36Выбор индикаторов
Основное условие – наличие (лучше) прямой (direct) или непрямой
(indirect) связи между индикатором и показателем (характеристикой)
Индикатор – либо сама
характеристика, либо ее состояние
Из ряда индикаторов выбирают более чувствительный
Возможна группа индикаторов, которые сводятся в индекс
Обоснование – сначала теоретическое, затем тестирование, пилотаж
Выбор зависит от условий и объекта исследования
Обязательный блок индикаторов – социально-демографический. Количество зависит от гипотез, целей и задач исследования
Слайд 37Основные выводы
Измерение – исследовательская процедура, подразумевающая упрощение реальной социальной системы.
Поэтому используются несколько инструментов для измерения и чем сложнее изучаемая
система, тем больше требуется признаков
Используемые инструменты тестируются на надежность и валидность (или берутся используемые другими исследователями)
Результаты измерения тестируются на инвариантность (желательно, при повторяющихся исследованиях)
Процесс построения дизайна исследования – это соотнесение наших желаний с нашими возможностями
Слайд 38Литература
Little, T. D. ed. (2013). The Oxford handbook of quantitative
methods, volume 1: Foundations. Oxford University Press, с. 82-104, 170-188.
Методы сбора
информации в социологических исследованиях. (1990) Отв. ред. В.Г.Андреенков, О.М.Маслова. М.: Наука.
Девятко, И.Ф. (2009) Методы социологического исследования: Учеб. пособие. М.: КДУ, 5-е изд.
Ядов, В. А. (1987) Социологическое исследование: методология, программа, методы / В. А. Ядов; изд. 2-е, перераб. и доп. – М.: Наука.
Ядов, В. А. (1998) Стратегия социологического исследования. Описание, объяснение, понимание социальной реальности / В. А. Ядов – М.: «Добросвет», Книжный дом «Университет.
Жуленева, О.В. (2015) Статистическая инвариантность как критерий достижения эквивалентности данных кросс-национальных исследований// Социологический альманах. 2015, № 6. С. 84-96.
Черчилль Г.А. (2001) Маркетинговые исследования: Пер. с англ. — СПб.: Питер.