Wprowadzenie do Badań Ankietowych

Введение в анкетные
исследования
Мониторинг Консульских
представительств РП w России,
Беларуси и Украине, 20032004г.
Этапы анкетного
исследования











Дефиниция исследовательской проблемы
Подбор метода исследования
Дефиниция популяции
Формудировка вопросов и анкеты
Подбор образца
Вступительное тестирование анкеты
Сбор данных
Кодировка и конструкция базы данных (БД)
„Обработка” данных
Анализ данных
Отчёт (рапорт)
Методы анкетных
исследований
Анкеты для самостоятельного заполнения
Традиционные
Электронные
Почта
Массовые
Распротсранение в ручную
E-Mail
Дискета
Телефон
Факс
Интернет
Исследования опирающиеся на интерьвю
Традиционные
Электронные
Телефонные
Непосредственное
интерьвю
CATI
CAPI
Непосредственные интерьвю

Качества
высокая норма
возврата(90%, по почте
ниже 70%)
полезные при большом
количестве анкетных
вопросов
полезные в случае
появления языковых
прорблем

Недостатки
итервьюеры могут: читать
вопросы невнятно
изменять темп и тембр
интервью (намекать на
ответ)
действовать по заранее
принятому плану
повлиять на респондента
„кодировать” открытые
ответы
вопросы могут быть
стеснительными
Непосредственные интерьвю :
как справиться с
недостатками этого метода?
Ответ: точное обучение

Что должен знать
интевьвюер?
принцип
подбора образца
Что такое ошибочная толерантность и ошибки
в измерении

Что такое надёжность и точность вопросов

Почему высокий процент нормы возврата
столь существенный

Понимать цену недостатков данных, а также
цену неполностей и неточностей фиксирования
открытых вопросов

За чем столько информации?
Интерьвюер должен знать почему не может
принимать никаких методологических решений
своим путём.
Интерьвюер должен знать почему надо точно
придерживаться инструкции координаторов
исследования, даже если они не соответствую
естестве нным местныи проблемам.
Процесс подбора
образца

Дефиниция популяции
вопрос нормы
окончательный образец
возврата
(респонденты)

Reprezentatywność
Конструкция оси иследования
(идентификация) „операта”
Предварительный образец

Методы подбора
образца

прямые стихийные образцы

систематические стихийные образцы

слоевые стихийные образцы



пропорциональные
непропорциональные
нестихийные образцы
Процесс подбора
образца

Дефиниция популяции
Конструкция оси исследования
(идентификация) „операта”


Предварительный образец
Окончательный образец
(респонденты)

Зависимость между ошибочной
толерантностью и величиной
образца
0,1
Ошибочная
толлерантность
0,09
0,08
0,07
0,06
0,05
0,04
0,03
0,02
0,01
0
0
500 1000 1500 2000 2500 3000 3500 4000 4500 5000 5500 5000 5500 6000 6500
Величина образца
SE =SR(p(1-p)/n)
Зависимость между величиной
образца и величиной популяции
Проверенная величина
образца
500
480
460
440
420
400
380
360
340
320
0
5000
10000
15000
20000
Величина популяции
25000
30000
Статистическая сила как функция
величины образца
Статистическая сила
1
0,8
0,6
0,4
0,2
0
0
200
400
600
Число случаев в подгруппе
P1=0.55; P2=0.45; Alpha=0,05 (2-tailed)
800
1000
Ошибки в измерении, надёжность и
меткость (точность)
исследовательского инструмента
Ошибки в измерении чаще вытекают из другого
источника чем из подбора образца;в принципе
невозможно его подсчитать;нельзя путать его с
ошибочной толерантностью!
Надёжность инструмента означает, что на данный
вопрос получим один и тот же ответ, когда задаем этот
вопрос многократно
Меткость (точность) инструмента означает, что
вопрос мерит то, что должен мерить, напр.,
определенную черту опрашиваемого лица (мнение,
возраст, предпочтения) и только ее

Надежный инструмент не обязательно должен быть
метким, но каждый меткий инструмент является
надёжным
Почему высокая норма возврата
столь существенна?
Давайте примем, что знаем каков % человек считает, что
их человеческое достоинство нарушается сотрудниками
консульства; P=25%.
О лицах,которые отказались принять участие в
исследовании не знаем ничего. Давайте проверим каков
результат различных показателей нормы возврата для
нескольких гипотетических данных P по отношению к
этим лицам (P=10, 20, 25, 30, и.т.д.)
Норма возврата
% лиц, к которым работники консульства относились плохо
и тех кто отказался принять участие в исследовании
10
20
25
30
40
60
70
90% 27
26
25
24
23
22
19
80% 28
26
25
24
21
19
13
70% 31
27
25
23
19
14
3
60% 35
28
25
22
15
8
50% 40
30
25
20
10
40% 47
33
25
17
30% 60
37
25
13
25%=(1-SZ)(Pnr)+SZ(Pr)
Мониторинг консульских
представительств
Подбор образца

Какова наша исследовательская цель?
Оценка уровня изменений (совершенствования либо ухудшения) системы
выдачи виз в Республику Польша гражданам России, Белоруссии и
Украины в период с февраля по июль 2004 года.
Одноразовое исследование может быть неэффективным. Почему?

Что составляет нашу популяцию?
Накопление эпизодических выдачи либо отказа выдачи виз в определенные сроки (но
не накопление лиц ходатайствующих о визу и не накопление посещений
консульства)

Есть ли у нас „операт” (ось исследования)?
Нет. Мы должны воспользовать случяйный подбор точек во времени
(часы), как метод подбора образца


Предварительный образец
1120 попыток провести интервью (после корректуры 1533)
Окончательный образец (респонденты)
Около 900 интервью, учитывая 80% возврата (после корректуры 1226)
Величина образца: роль
ключевых пропорций и
величины подгрупп
Исследовательская цель: на сколько
изменятся ключевые черты процесса
ходатайствования о визу в течение 6
месяцев?
Тогда ключевых показателей несколько,
напр.,
На сколько могут сократиться очереди для
подачи документов (20-30%?)
Реально, что изменения будут проходить
разным темпом в разных странах? (Да,
минимум n=400)
Каличество интервью на
представительство
Киев Одесса Луцьк Львов
109
96
109
164
Москва
159
СанктПетербург
68
Гродно Минск Брест
71
190
238
Калинингра
д
273
Харьков
55
Число интервьюеров на пр
едставительство
(30 интервью на одного,
минимум 3 интервьюера)
Киев Одесса Луцьк Львов
4
3
4
5
Москва
5
СанктПетербург
3
Калинингра
д
9
Гродно Минск Брест
3
6
8
Харьков
3
Логистика
Исследоваиние будет продолжаться
месяц.
Пример метода стихийного подбора
респондентов для г. Киев (nk=109)
Логистика:Киев
Основное положение:
20 рабочих дня
выдача виз: 4 часа в день
с 12 до 18
109 интерьвю
10 интерьвю в день
2 интерьвюера (+1 сменщик и
набюлюдатель)
Логистика:Киев (2)
Стихийный подбор 11 дней (1 - 20)
Стихийный подбор времени начала исследования в числе 10 (1 –
360)
Напр.:
день 3: 13, 40, 180, 181 и.т.д. То есть
12:13, 12:40, 15:00, 15:01, и.т.д.
Раздел „времени” между интервьюеров (один интервьюер должен получить
15:00, другой 15:01)
Опрашиваем первое лицо, вышедшее из консульства в 12:13, 12:40, и.т.д.
Отказ принять участие в опросе фиксируется на первом листе анкеты, также
в случае, когда лицо не исполняет критерий исследования. В таких
случаях отрываем первую страницу вопросника и после приложения к
нему нового квалификационного листа можем воспользоваться им вновь
Заполненные анкеты, а также квалификационные листы передаем сменщику
Анкеты высылаются в Варшаву в тот же день
Запрещается копировать анкеты и вводить поправки после завершения
опроса
Надёжность




В феврале и пол года спустя данный вопрос
должен быть поставлен таким же образом что
не меняется его понимание (даже если
изменястя обстановка и интервьюеры)
Чем легче и предусмтотренее ответ на данный
вопрос, тем важнее, чтоб задать его таким же
образом как другие. Почему?
Ошибок в измерении избегаем путем обучения
стандартизации задаваемых вопросов, а не
выработкой у интервьюера особой
бдительности, эмпатии, и.т.д.
Особые коммуникативные умения
существенные только во времья
вступительного разговора с респондента
Качество работы интевьюера
Анкеты отправляем в Варшаву в тот же день
Нельзя копировать формуляры собственным путём
Нельзя вводить поправки после исследования
При каждом вопросе должен быть зафиксирован
ответ (выключая вопросы, которые согласно
указаниям надо пропустить)
Анкеты будут провераться сразу же после
получения
Содлюдение алгоритма подбора респодентов будет
подвергаться верификации („нулевая”
толерантность)
Безопасность интервьюера
Работаем в коллективах по 3 человека
2 человека ведут интервью, 1 наблюдает и
хронит материялы
В случае опасения (со стороны охранников,
других лиц) сразу прорвать работу и
связаться с координатором или
представителем НГО