Дизайн опросного исследования — это план исследования, которое собирает стандартизированные ответы у выборки людей и использует их, чтобы описать или объяснить более широкую генеральную совокупность. До того как будет написан хоть один вопрос, он определяет пять вещей: что Вы будете оценивать, кого будете спрашивать, как будете их отбирать, как до них доберётесь и как будете анализировать полученное1, 4.
Большинство опросных исследований — наблюдательные: они фиксируют то, что сообщают люди, без какого-либо вмешательства. Они могут описывать генеральную совокупность или изучать связи, но сами по себе эти результаты не доказывают причинность. Опросный эксперимент добавляет случайное распределение, чтобы проверить конкретное изменение, например формулировку вопроса.
Что такое дизайн опросного исследования? Определение, цель и когда его применять
Стандартное определение опросного исследования: использование стандартизированной анкеты или интервью для сбора данных о людях — о том, что они делают, думают, знают или предпочитают4. Дизайн — это набор решений, благодаря которым эти ответы можно использовать как доказательства. Фаулер формулирует это просто: цель — получить статистику о генеральной совокупности, опросив выборку, а дизайн — это всё, что делает выборку и вопросы пригодными для этой цели3.
В главе о методах тот же план может называться дизайном опросного исследования, дизайном опроса в исследовании или методологией дизайна опроса; все три означают описанный здесь план. Полезно различать три слова. Анкета — это инструмент. Опрос — всё исследование вокруг неё. Методология опросов — совокупность исследований о том, как хорошо проводить опросы, построенная вокруг источников ошибок, которые должен контролировать дизайн: охват, выборка, неответы, измерение и обработка1. Хороший дизайн называет каждый из этих рисков и что-то с ним делает.
Цель опроса — выразить числом то, что могут сообщить только люди, для группы большей, чем те, кого Вы спросили. Используйте опросный дизайн, когда нужное Вам лучше всего знают сами люди (удовлетворённость, намерения, мнения, личное поведение), когда нужно число для определённой группы, а не рассказ нескольких человек, и когда можно добраться до выборки, похожей на эту группу. Не используйте его, когда ответ уже где-то записан (продажи, журналы, посещаемость), когда нужно доказать причину или когда отвечать будут не те люди, которых нужно описать. В этих случаях обратитесь к корреляционному исследованию для вопросов о связях и к эксперименту для вопросов о причинах.
Опросное исследование — количественное или качественное?
Количественное — почти всегда. Опрос превращает ответы в количества, проценты, средние и корреляции и анализируется статистическими методами. Creswell относит опросы к количественным дизайнам наряду с экспериментами9. Опрос становится смешанным методом, когда открытые ответы кодируются в темы и приводятся рядом с цифрами, и качественным — только когда весь инструмент состоит из открытых вопросов, анализируемых по смыслу, а это ближе к исследованию на основе структурированных интервью, чем к опросу.
Этот вопрос задают так часто потому, что пункты шкалы Лайкерта выглядят как мнения, а не как измерения. Но это всё равно числа. Если нужно описать, сколько, как много или как часто, Вы проводите количественный опрос; если хотите понять, почему, словами самих людей, добавьте два-три открытых вопроса и считайте их кодирование отдельным качественным этапом.
Виды дизайна опросного исследования
Опросные дизайны называют по трём независимым осям, и в главе о методах обычно нужно по одному слову для каждой: цель (для чего нужны цифры), временная структура (когда и как часто Вы измеряете) и способ (как люди отвечают). «Описательный поперечный онлайн-опрос» — это полное описание дизайна.
| Вид дизайна | На что отвечает | Пример | Главное ограничение |
|---|---|---|---|
| Описательный | Сколько, как много, как часто. Уровень или доля для определённой группы. | Какая доля клиентов порекомендовала бы нас в этом квартале | Ничего не говорит о причинах |
| Аналитический (корреляционный) | Связаны ли две вещи и насколько сильно. | Собираются ли сотрудники, которые выше оценивают своего руководителя, дольше оставаться в компании | Связь — не причина |
| Разведывательный | Какие существуют проблемы, категории и понятия, прежде чем их можно будет измерить. | Открытые вопросы небольшой выборке перед основным исследованием | Нельзя обобщать; ведёт ко второму опросу |
| Поперечный | Снимок: одно измерение в один момент времени. | Ежегодный опрос сотрудников | Не разделяет эффекты возраста и эффекты периода |
| Повторный поперечный (трендовый) | Изменения в генеральной совокупности, с новой выборкой в каждой волне. | Ежемесячный мониторинг бренда | Изменения могут быть шумом выборки, если волны не согласованы |
| Лонгитюдный (панельный или когортный) | Изменения у одних и тех же людей и то, что им предшествовало. | Одни и те же новые сотрудники через 30, 90 и 180 дней | Выбывание, эффект повторного участия, стоимость |
| Опросный эксперимент | Вызывает ли формулировка, сообщение или концепция другой ответ. | Половина видит цену A, половина — цену B; сравнивается намерение купить | Причинным является только изменяемый элемент |
| Способ: онлайн, телефон, почта, лично, смешанный | До кого можно добраться и как люди отвечают. | Ссылка в письме на веб-опрос с последующим звонком тем, кто не ответил | Способ меняет ответы; сохраняйте одинаковые формулировки во всех способах |
Поперечный
- Одна волна, одна выборка, один период: поперечный дизайн опросного исследования, который используют большинство дипломных работ и пульс-опросов.
- Самый дешёвый и быстрый; вариант по умолчанию для дипломной работы или пульс-опроса.
- Позволяет сравнивать группы (по возрасту, региону, тарифу), но не отслеживать отдельных людей.
- Записывается как «поперечный опрос N [генеральная совокупность] в период [даты]».
Лонгитюдный
- Две волны или больше, каждый раз одни и те же люди.
- Показывает, кто изменился и что было раньше; единственный опросный дизайн, который приближается к последовательности событий.
- Требует идентификаторов, согласия на повторный контакт и плана на 20–40 процентов, которые выбывают между волнами.
- Если нужен только тренд по генеральной совокупности, повторный поперечный дизайн проще.
Два замечания о названиях для главы о методах. «Описательный дизайн опросного исследования» и «поперечный» — не соперники; большинство студенческих опросов являются и тем и другим. А опрос, сравнивающий группы, остаётся неэкспериментальным, если Вы сами не распределяли людей по этим группам, поэтому называйте его аналитическим или корреляционным, а не квазиэкспериментальным9.
Какой дизайн опросного исследования Вам нужен?
Ответьте на три вопроса, и инструмент назовёт дизайн, объяснит его в одном абзаце и составит предложение для раздела о методах, которое можно вставить и дополнить. Он работает в Вашем браузере и никуда ничего не отправляет.
Описательный поперечный опрос (онлайн)
Одна выборка, одно измерение, результаты в виде уровней и долей. Отвечает на вопросы «сколько» и «как много» для генеральной совокупности, из которой взята выборка, и ничего не говорит об изменениях или причинах.
Предложение следует терминологии дизайна у Creswell и Groves et al.9, 1 Добавьте метод формирования выборки из шага 3 и обоснование объёма выборки из шага 4, и абзац о дизайне готов.
Опрос как метод исследования: как спланировать опросное исследование за 8 шагов
Порядок важен. Каждый шаг сужает следующий, а каждый пропущенный шаг возвращается ограничением, которое потом придётся описывать. Где у шага есть отдельное руководство на этом сайте, ссылка ведёт туда; эта страница содержит решение, а не детали.
Сформулируйте решение и генеральную совокупность в одном предложении
«Среди активных клиентов в США во 2-м квартале оценить долю тех, кто порекомендовал бы нас, в целом и по тарифам». Это предложение задаёт целевую генеральную совокупность, нужную основу выборки, единицу анализа и оценки, которые Вы обещаете. Если не получается его написать, Вы ещё не готовы писать вопросы.
Выберите вид дизайна
Описательный или аналитический; поперечный, повторный или лонгитюдный; один способ или смешанный. Используйте инструмент выбора выше и таблицу видов. Для снимка нужна одна волна. Для тренда — одинаковые формулировки во всех волнах. Для вопроса «кто изменился» — те же люди, согласие на повторный контакт и план удержания.
Выберите подход к формированию выборки и назовите смещение, которое Вы принимаете
Вероятностная выборка (у каждого элемента основы есть известный ненулевой шанс попасть в неё) — вот что делает погрешность осмысленной. Удобные, добровольные выборки и выборки по самозаписи подходят для отзывов о продукте и пульс-опросов, но вывод сужается до тех людей, до которых Вы добрались. Девять методов сравниваются в разделе выборка в исследовании. Что бы Вы ни выбрали, перечислите три главных способа, которыми Ваша выборка может отличаться от генеральной совокупности (охват, самоотбор, неответы), и по одной проверке для каждого, например сравнение ранних и поздних ответивших или состава выборки с известным ориентиром1, 5.
Задайте объём выборки, затем рассчитайте число приглашений
Для доли при доверительной вероятности 95 процентов и погрешности 5 пунктов около 385 завершённых анкет достаточно для любой большой генеральной совокупности; для 3 пунктов нужно около 1068. Небольшим генеральным совокупностям нужно меньше: 218 для генеральной совокупности из 500, 278 для 1000, 370 для 10 000. Каждой подгруппе, которую Вы хотите сравнивать, нужен свой минимум, обычно 100 или больше. Затем: нужно приглашений = завершённые анкеты / (доля подходящих x доля ответивших x доля завершения). Для 300 завершённых анкет при 90 процентах подходящих, доле ответивших 25 процентов и доле завершения 80 процентов это 1667 приглашений. Калькулятор объёма выборки выполнит расчёт и вычислит погрешность.
Здесь помогут две цифры из наших собственных данных. Опросы из трёх и более вопросов завершают примерно 81 процент начавших, поэтому 0,8 — разумное значение по умолчанию для последнего множителя. А в первый день опрос собирает 62,8 процента всего, что он когда-либо получит, и 86 процентов — в течение недели, поэтому планируйте период сбора от момента рассылки, а не по календарю.
Выберите способ опроса и план контактов
Способ опроса определяет, до кого Вы доберётесь, как люди ответят и сколько это будет стоить. Основные способы опроса — онлайн, по телефону, по почте, лично и смешанный. Онлайн быстро и дёшево и поддерживает ветвление; телефон и личное интервью охватывают группы без электронной почты и позволяют интервьюеру пояснить вопрос ценой эффекта интервьюера и затрат; почта медленно охватывает группы с низкой цифровой грамотностью; смешанный способ расширяет охват, но сдвигает ответы, если формулировки и оформление не остаются одинаковыми2. Планируйте контакты как часть дизайна: в методе адаптированного дизайна Дилмана используется несколько контактов в определённое время (предварительное уведомление, приглашение, напоминание, последнее обращение), и каждый написан по-своему2. В SuperSurvey 73,9 процента всех ответов приходят с телефона, поэтому онлайн-дизайн — это мобильный дизайн, планировали Вы это или нет.
Стройте инструмент под анализ
Определите каждый конструкт простыми словами, затем выберите формат, нужный для анализа: категории для процента, шкалу оценки или согласия для среднего или доли верхних оценок, одну мысль на пункт, простые и уместные вопросы в начале, деликатные пункты ближе к концу8, 7. Если для Вашего конструкта есть валидированный инструмент, используйте его и сошлитесь на него. Написание — отдельная задача: см. как составить анкету о процедуре из семи шагов, как составить вопросы для опроса о формулировках и шкалы Лайкерта в сравнении со шкалами оценки о выборе между ними. Два структурных решения стоит принять здесь, потому что ориентиры ниже оценивают их цену: делайте вопросы обязательными (это стоит 0,4 пункта доли завершения и даёт на 13 процентов больше ответов) и никогда не заканчивайте адресом электронной почты или открытым текстовым полем.
Предварительное тестирование, пилотаж, затем запуск
Проведите предварительное тестирование с несколькими людьми из целевой группы, которые рассуждают вслух, чтобы выявить проблемы с формулировками и логикой; затем проведите пилотажное исследование на небольшой части реального списка, чтобы проверить время заполнения, точки выхода и работу отборочных вопросов и квот3, 5. Соберите пилотаж в бесплатном онлайн-конструкторе опросов, чтобы он работал с той же логикой перехода, обязательными полями и мобильной вёрсткой, что и реальная рассылка. Доработайте приглашение до напоминания: укажите цель, время заполнения, дату закрытия и только то обещание конфиденциальности, которое можете выполнить. Анонимность означает, что Вы не собираете идентификаторы; конфиденциальность — что Вы их храните и ограничиваете доступ. Средства контроля описаны в разделе конфиденциальность опросов, а если тема может подвергнуть кого-то риску, публикуйте только агрегированные данные, скрывая малочисленные ячейки.
Спланируйте анализ и правила качества до начала сбора данных
Сначала запишите правила очистки (дубликаты, нереально быстрое время заполнения по сравнению с медианой пилотажа, монотонные ответы в таблицах), основные показатели, разрезы по подгруппам с минимальными размерами, переменные для взвешивания, если они есть, и правило значимости, которое будете применять1. Сообщайте долю ответивших по стандартным определениям AAPOR, чтобы число означало то же самое для читателя в другом месте6. Затем в отчёте отделите то, что Вы нашли, от того, как Вы это нашли: генеральная совокупность, основа выборки, способ, даты сбора, число завершённых анкет, взвешивание, ограничения. Статистическая значимость и смещение ответов описывают две ловушки интерпретации; анализ количественных данных — всё остальное.
Шаги 7 и 8 — то место, где большинство опросных дизайнов на практике дают сбой, а вовсе не анкета. Предварительное тестирование стоит один день; правило очистки, придуманное после того, как Вы увидели результаты, стоит Вашей репутации.
Что говорят 2,27 млн прохождений о дизайне опроса
Чтобы изучить, как решения о дизайне связаны с завершением, мы проанализировали записи конструктора опросов SuperSurvey с сентября 2023 по август 2026 года: где люди останавливались, что пропускали и сколько времени занимали разные типы вопросов. Это наблюдательные сравнения; они могут подсказать, что проверить на пилотаже, но не доказывают, что изменение одной настройки даст тот же результат в любом опросе.
1. Люди не бросают опрос посередине
Каждая линия прослеживает 100 человек, открывших опрос такой длины; высота на вопросе 7 — доля тех, кто к этому моменту всё ещё отвечает. Опросы усредняются с равным весом, поэтому ни один крупный опрос не определяет кривую.
Первый вопрос стоит от шести до десяти пунктов. Второй — четыре, третий — два с половиной, а после этого линия почти горизонтальна, сколько бы ни длился опрос. Затем последний вопрос забирает ещё от восьми до одиннадцати пунктов за один шаг. Всё, что между ними, стоит примерно один пункт на вопрос, будь в опросе пять вопросов или тридцать.
Прохождение фиксируется только после того, как человек начинает взаимодействовать, поэтому те, кто открыл опрос и сразу закрыл, в знаменатель не входят; реальные потери на входе больше. 6,7 процента начавших не отвечают ни на что. Выравнивание после третьего вопроса сохраняется во всех диапазонах длины.
2. Последний вопрос пропускают, а не бросают опрос
То, чем заканчивается опрос, влияет на то, насколько полно его заполнят. Измерено внутри сопоставимых диапазонов по числу вопросов в сравнении с опросами, которые заканчиваются вопросом с выбором из вариантов:
Если опрос заканчивается шкалой оценки, он заполняется на 4,7 пункта полнее, чем при окончании вопросом с выбором из вариантов. Если адресом электронной почты — на 15,2 пункта хуже. Это разброс в девятнадцать пунктов из-за одного решения, которое меняется за две секунды.
n = 106 опросов, заканчивающихся шкалой оценки, и 90, заканчивающихся адресом электронной почты, против 2504, заканчивающихся вопросом с выбором из вариантов. Строка с адресом — самая ненадёжная цифра в этом разделе; считайте её величину приблизительной, а направление — надёжным.
3. Обязательные вопросы почти ничего не стоят, за одним исключением
Самый распространённый совет по опросам — делать вопросы необязательными, чтобы люди не уходили. При сопоставлении внутри диапазонов по числу вопросов опросы, где все вопросы обязательны, завершают 81,2 процента (899 опросов), а опросы, где все вопросы необязательны, — 80,8 процента (4365 опросов). Эти +0,4 пункта — нулевой эффект. Обязательные ответы дают на 13 процентов больше ответов на каждого начавшего: 88 процентов отвеченных вопросов против 78 процентов. Тем не менее 69,5 процента создателей опросов делают все вопросы необязательными.
4. Цена каждого типа вопроса
Как часто на вопрос каждого типа отвечают, когда до него доходят, и сколько времени на него тратит медианный участник. Эти данные основаны на миллионах показов вопросов, поэтому на них не влияет, какой аудитории обычно отправляют тот или иной тип.
| Тип вопроса | Доля ответов при показе | Медианное время | Показов |
|---|---|---|---|
| Шкала оценки (от 1 до 10) | 96.2% | 5.0s | 159,545 |
| Net Promoter Score | 95.0% | 4.0s | 3,013 |
| Ранжирование | 95.2% | 25.0s | 25,878 |
| Оценка звёздами | 93.7% | 4.6s | 57,468 |
| Раскрывающийся список | 91.7% | 6.3s | 106,256 |
| Флажки | 88.9% | 8.1s | 624,893 |
| Выбор из вариантов | 86.0% | 4.9s | 2,301,606 |
| Короткое текстовое поле | 79.4% | 10.6s | 379,279 |
| Матрица / таблица | 77.4% | 19.9s | 23,579 |
| Длинное текстовое поле | 69.7% | 16.2s | 267,430 |
| Адрес электронной почты | 62.2% | 8.4s | 21,475 |
На шкалу оценки отвечают 96,2 процента увидевших её, за пять секунд. На вопрос на ранжирование отвечают почти так же часто, но он занимает 25 секунд, а опросы с ним завершают на 7,2 пункта хуже. Длинный текст — второй налог: на него отвечают 69,7 процента, и он снижает долю завершения содержащего его опроса на 5,8 пункта. Это эмпирическое обоснование хрестоматийного совета использовать закрытые пункты для измерения, а открытые — экономно.
Лишь 163 опроса с вопросом на ранжирование преодолели порог в 20 прохождений, поэтому считайте цифру 7,2 пункта приблизительной. Кроме того, тип вопроса отчасти отражает, кому отправляли опрос: вопросы на ранжирование живут в маркетинговых исследованиях среди незнакомых людей, шкалы оценки — в формах обратной связи для клиентов.
5. Длина стоит меньше, чем Вам говорили
Синие столбцы — доля завершения. Оранжевая линия — то, что Вы получаете в итоге: число собранных ответов на каждого начавшего.
Переход от пяти вопросов к двадцати стоит около 8,4 пункта доли завершения и даёт в 3,5 раза больше данных. Нет такой длины, после которой общий объём перестаёт расти. Медианный опрос содержит 5 вопросов и проходится за 71 секунду; даже опрос из 20–29 вопросов по медиане проходится меньше чем за 4 минуты. Если вопросов меньше десяти, на телефонах завершают 83,7 процента против 83,1 процента на компьютерах; если больше пятнадцати, разрыв увеличивается до двух–пяти пунктов. Длина — это сначала проблема мобильных устройств, а уже потом проблема длины.
Длинные опросы непропорционально часто проводят организации с «гарантированной» аудиторией — работодатель, университет или школа. Опрос из тридцати вопросов, отправленный незнакомым людям, должен ожидать худших результатов. Что зависит от самого опроса, а не от его аудитории, — это форма кривой: стабильная цена около одного пункта за вопрос в середине, в каждом диапазоне длины.
6. Прохождения приходят всплеском, а половина опросов не получает ни одного
Накопленная доля прохождений опроса, считая со дня, когда пришло первое прохождение, для 4718 опросов, у которых не менее 20 прохождений и полные 90 дней сбора. Медианный опрос получает 75,8 процента всего, что когда-либо соберёт, за три дня и 86 процентов — за неделю; если оставить его открытым на месяц, это добавит 9,7 пункта. Опрос — это разовый запуск, а не долгий сбор. А 52,0 процента всех созданных опросов не получают ни одного прохождения, поэтому самая трудная часть дизайна опроса — рассылка, а не создание.
Это следствие того, как люди делятся опросами, — одним всплеском ссылок, — а не закон природы. Опрос, встроенный на посещаемую страницу, собирает ответы месяцами. «Не получил ни одного прохождения» включает черновики и тренировочные опросы; это не доля неудач.
Что не дало разницы
Измерено тем же способом, с сопоставлением внутри диапазонов по числу вопросов: собственная тема и фирменные цвета — минус 1,1 пункта; автоматический переход к следующему вопросу — минус 0,6; случайный порядок вопросов — плюс 1,2, всего на 123 опросах; индикатор прогресса — плюс 2,7, самый сильный косметический рычаг, и всё равно слабее любого из структурных выше. Видимые рычаги меняют долю завершения от нуля до трёх пунктов. Невидимые — чем заканчивается опрос, что Вы делаете обязательным и какой тип вопроса выбираете — от пяти до сорока четырёх.
Как это измерялось и чего это не измеряет
Корпус данных
Все опросы, созданные в SuperSurvey с 16 сентября 2023 по 25 августа 2026 года, прочитанные из рабочих записей, а не выборочно: 122 887 опросов от 58 621 создателя, из которых 58 938 собрали хотя бы одно прохождение, всего 2 274 520 прохождений.
Что считается реальным опросом
Всё описанное выше измерено на опросах, в которых не менее трёх вопросов и не менее трёх прохождений: 25 112 опросов с 1 180 070 начатыми сеансами и 998 864 завершениями. Для любого показателя по отдельному опросу дополнительно требуется 20 начатых сеансов, что оставляет 6878 опросов. Повопросная реконструкция читает 558 927 отдельных записей прохождений в 15 181 опросе. 12,8 процента опросов созданы на платном тарифе и 85 процентов — человеком с аккаунтом; если ограничиться владельцами аккаунтов, ничего на этой странице не меняется.
Как рассчитываются показатели
Каждый показатель — среднее по опросам без взвешивания: каждый опрос учитывается один раз независимо от числа собранных прохождений, потому что два опроса в корпусе собрали больше 100 000 прохождений каждый, и взвешенное по прохождениям среднее отражало бы цифры этих двух клиентов. Сравнения функций скорректированы по длине: рассчитаны внутри диапазонов по числу вопросов (от 1 до 4, от 5 до 7, от 8 до 10, от 11 до 14, от 15 до 19, от 20 до 29, 30+) и перевзвешены по распределению диапазонов у группы с функцией, поэтому разница никогда не может быть артефактом того, что одна группа короче. Выход из опроса реконструирован по каждой отдельной записи прохождения, а не по сохранённому счётчику. Время на вопрос берётся из постраничного хронометража прохождения; приводится медиана, потому что среднее определяют люди, оставившие вкладку открытой.
Чего это не измеряет
- Долю ответивших на приглашение. Запись появляется только тогда, когда человек открывает опрос и начинает с ним взаимодействовать, поэтому все цифры выхода здесь консервативны.
- Качество ответов. Мы видим, что человек напечатал 14 слов; мы не видим, были ли они искренними.
- Причинность. Это наблюдательные данные. Где результат может объясняться аудиторией, а не дизайном, это отмечено на месте.
- Ваш опрос. Это средние по десяткам тысяч опросов, отправленных очень разным людям: значения по умолчанию, а не прогноз.
Корпус закрыт 25 августа 2026 года. Цифры получены 2 сентября 2026 года.
Преимущества и недостатки опросного исследования
Что опросный дизайн делает хорошо
- Дёшево охватывает большие выборки, особенно онлайн, поэтому оценки получаются с пригодной погрешностью.
- Стандартизированные вопросы делают ответы сопоставимыми между людьми, группами и волнами.
- Измеряет то, что не фиксирует ни один журнал: установки, намерения, удовлетворённость, личное поведение.
- Гибкость: описательные, корреляционные и трендовые вопросы в одном инструменте.
- Быстро. Большая часть ответов, которые Вы получите, приходит в течение трёх дней после рассылки.
Где он не справляется
- Ответы со слов участников. Люди неверно вспоминают, округляют в большую сторону и отвечают так, чтобы выглядеть лучше; формулировка и порядок сдвигают ответы8.
- Неответы. Ответившие отличаются от неответивших, и низкая доля ответивших не доказывает смещение, так же как высокая его не исключает1.
- Охват. Ваш список — это не генеральная совокупность; у того, кого в нём нет, нет шанса получить вопрос.
- Причина. Опрос показывает связь; причину показывает только опросный эксперимент со случайным распределением, и только для изменённого элемента.
- Глубина. Закрытые пункты не позволяют уточнить. Открытые позволяют, ценой 30 пунктов доли ответов.
Примеры дизайна опросного исследования
Три примера дизайна опроса, записанные так, как они выглядели бы в разделе о методах, каждый с решением, которому он служит. Первый подробно разобран в рабочем листе ниже.
Отток подписчиков (практик; описательный и аналитический, поперечный)
Решение: какие причины оттока исправлять в первую очередь в следующем квартале. Дизайн: поперечный опрос активных подписчиков в США и Канаде, ссылка в письме на веб-опрос, ориентация на мобильные устройства, два напоминания, квоты по тарифам и регионам, чтобы по каждому тарифу набралось не менее 200 завершённых анкет. Основные показатели: намерение продлить (от 0 до 10), удовлетворённость функциями и поддержкой (от 1 до 5), причины неудовлетворённости (несколько вариантов), один открытый вопрос об улучшениях в середине опроса, а не в конце. Анализ: доля верхних оценок по тарифам, факторы намерения продлить по корреляции, сравнение ранних и поздних ответивших как проверка смещения.
Дипломная работа (студент; описательный, поперечный)
Решение: описать учебные привычки и их связь с оценками со слов участников среди студентов третьего курса одного университета. Дизайн: «В данном исследовании использовался описательный поперечный дизайн опроса. Удобная выборка из 312 студентов третьего курса заполнила онлайн-анкету в период с 3 по 17 марта. Поскольку выборка не была случайно отобрана из списка студентов, результаты описывают участников, а не весь курс, и погрешность не приводится». Именно последнее предложение ищут научные руководители.
Пульс-опрос сотрудников (HR; повторный поперечный, трендовый)
Решение: изменила ли программа обучения руководителей климат в командах. Дизайн: одни и те же восемь пунктов всем сотрудникам каждый квартал, анонимно, новая выборка в каждой волне по замыслу (кто ответит), результаты по отделам — только там, где ответили не менее пяти человек. Формулировки зафиксированы после первой волны, чтобы движение означало изменение, а не переформулировку. Аналитическое дополнение сравнивает отделы, чьи руководители прошли обучение, с теми, чьи не прошли; результат приводится как связь, потому что руководители не распределялись случайно.
| Решение | Какие причины оттока исправлять в первую очередь в следующем квартале? |
|---|---|
| Целевая генеральная совокупность и основа выборки | Активные подписчики за последние 60 дней, США и Канада; основа = список адресов для выставления счетов |
| Вид дизайна | Описательный и аналитический, поперечный, ежеквартально повторяемый как трендовый |
| Формирование выборки и квоты | Сплошной охват основы с квотами по тарифам и регионам; минимум 200 завершённых анкет на тариф |
| Объём выборки и приглашения | 600 завершённых анкет; при 95 % подходящих, 25 % ответивших и 80 % завершения это около 3158 приглашений |
| Способ и контакты | Ссылка в письме на веб-опрос; приглашение, напоминание на 3-й день, последнее обращение на 7-й день; закрытие на 10-й день |
| Показатели | Намерение продлить от 0 до 10; удовлетворённость функциями и поддержкой от 1 до 5; причины — несколько вариантов; один открытый вопрос в середине опроса; тариф и стаж берутся из аккаунта, а не спрашиваются |
| Правила качества | Пилотаж на 2 % списка; удаление дубликатов и прохождений быстрее трети медианы пилотажа; все пункты обязательны, кроме открытого вопроса |
| Проверки смещения | Состав выборки в сравнении с клиентской базой по тарифам и регионам; ранние и поздние ответившие; результаты со взвешиванием и без |
| Отчётность | Резюме на одну страницу плюс блок о методах: основа выборки, даты сбора, число завершённых анкет, доля ответивших по AAPOR, взвешивание, ограничения |
Чтобы составить саму анкету, начните с шаблона опроса для ближайшего сценария и замените показатели на свои конструкты; инструмент, сделанный под задачу, лучше заимствованного, но заимствованный лучше чистого листа.
Частые вопросы
К какому виду дизайна исследования относится опрос?
Опрос — неэкспериментальный количественный дизайн. В зависимости от цели его относят к описательным (уровни и доли) или корреляционным (связи между показателями), а в зависимости от времени — к поперечным или лонгитюдным. Экспериментальным он становится, только когда Вы случайно распределяете участников по разным версиям вопроса или стимула, и тогда причинным является только это сравнение.
Что такое описательный дизайн опросного исследования?
Дизайн, цель которого — описать генеральную совокупность по измеряемым переменным: сколько, как много, как часто и как это различается между группами. Он ничего не утверждает о причинах. Большинство разовых анкет и большинство студенческих опросов одновременно описательные и поперечные, и в главе о методах стоит назвать оба слова.
Чем поперечный дизайн опроса отличается от лонгитюдного?
Поперечный измеряет один раз. Лонгитюдный измеряет одних и тех же людей два раза или больше — это единственный способ увидеть, кто изменился и в каком порядке. Повторный поперечный (трендовый) дизайн находится между ними: он измеряет больше одного раза, но с новой выборкой в каждой волне, поэтому отслеживает генеральную совокупность, а не отдельных людей. Если нужен только тренд, выбирайте его: он избавляет от выбывания и необходимости согласия на повторный контакт.
Сколько участников нужно для опроса?
Для доли с погрешностью 5 пунктов при доверительной вероятности 95 процентов — около 385 завершённых анкет для любой большой генеральной совокупности и меньше для небольших (218 для генеральной совокупности из 500). Если Вы будете сравнивать подгруппы, каждой нужен свой минимум, обычно 100 или больше. Для удобной выборки защищать погрешность не приходится, поэтому рассчитывайте её размер по самой малой группе, которую нужно описать, и прямо об этом скажите. Калькулятор объёма выборки на этом сайте выполнит расчёт.
Что такое дизайн опросного исследования в психологии и в маркетинговых исследованиях?
Дизайн тот же, а терминология и основы выборки разные. В психологии опрос обычно измеряет конструкты с помощью валидированных многопунктовых шкал, сообщает их надёжность и называется корреляционным дизайном, когда связывает конструкты между собой. В маркетинговых исследованиях он измеряет осведомлённость, предпочтения и намерения в отношении бренда или продукта, формирует выборку из клиентских списков или панелей по самозаписи и сообщает доли и доли верхних оценок, часто в виде регулярного мониторинга. Оба неэкспериментальные, если стимул не распределяется случайно.
Как написать раздел о дизайне опросного исследования в главе о методах?
Четыре предложения в таком порядке: дизайн (цель плюс временная структура плюс способ), генеральная совокупность и метод формирования выборки, объём выборки с обоснованием и инструмент с указанием источника или процесса разработки. Затем даты сбора, доля ответивших по указанному определению и ограничения, вытекающие из метода формирования выборки. Инструмент выбора дизайна на этой странице составляет первое предложение; руководства по выборке и объёму выборки дают второе и третье.
Чем дизайн опроса отличается от анкеты?
Анкета — одна из составляющих: пункты и варианты ответов к ним. Дизайн опроса — весь план вокруг неё: генеральная совокупность, выборка, способ, сроки, показатели, анализ и отчётность. Хорошая анкета внутри плохого дизайна всё равно даёт цифры, которые описывают не тех людей.
Нужна ли в опросе проверка внимательности?
Не по умолчанию. Для открытых ссылок с вознаграждением или платных панелей одна проверка внимательности помогает отметить ответы, данные без старания. Для надёжного внутреннего списка она в основном раздражает людей и создаёт исключения, которые потом придётся обосновывать. Если Вы её используете, запишите правило (что считается непройденной проверкой, сколько ошибок допустимо) до начала сбора данных и сообщите, сколько записей она исключила.
Как составлено это руководство и чего оно не охватывает
Терминология дизайна и восемь шагов следуют литературе по методологии опросов, в основном концепции общей ошибки опроса Гроувса и соавторов, методу адаптированного дизайна Дилмана, книге Фаулера Survey Research Methods и документам AAPOR о передовой практике и стандартных определениях, каждый из которых указан там, где используется. Ничего не взято из схем поставщиков. Цифры объёма выборки получены по стандартной формуле для доли при доверительной вероятности 95 процентов с поправкой на конечную генеральную совокупность; страница калькулятора показывает расчёт.
Раздел с ориентирами — наш собственный анализ рабочих данных SuperSurvey, полностью описанный в методической заметке выше. Там же указаны его ограничения: он не видит долю ответивших на приглашения и качество ответов, он наблюдательный и усредняет очень разные аудитории. Цифры конкурентов, которые не удалось проследить до первоисточника, не включены; в частности, мы не повторяем часто цитируемую статистику поставщиков о точности опросов или доверии к ним.
Эта страница посвящена дизайну. Она не охватывает, как отбирать участников, сколько их отбирать и как писать пункты; это отдельные задачи, описанные в разделах формирование выборки, объём выборки и как составить анкету.
Раскрытие информации. SuperSurvey делает программное обеспечение для опросов, поэтому у нас есть коммерческий интерес в том, чтобы люди проводили опросы. Ничего на этой странице не продаётся и не закрыто, и ни один совет не зависит от использования нашего инструмента. Инструмент выбора дизайна работает в Вашем браузере и никуда ничего не отправляет. Ориентиры существуют потому, что только мы видим эти данные, и опубликовать их, включая выводы, которые противоречат распространённым советам, показалось полезнее, чем держать при себе.
Источники
- Groves, R. M., Fowler, F. J., Couper, M. P., Lepkowski, J. M., Singer, E., & Tourangeau, R. (2009). Survey Methodology (2-е изд.). Wiley. wiley.com
- Dillman, D. A., Smyth, J. D., & Christian, L. M. (2014). Internet, Phone, Mail, and Mixed-Mode Surveys: The Tailored Design Method (4-е изд.). Wiley. wiley.com
- Fowler, F. J., Jr. (2014). Survey Research Methods (5-е изд.). SAGE. methods.sagepub.com
- Ponto, J. (2015). Understanding and evaluating survey research. Journal of the Advanced Practitioner in Oncology, 6(2), 168-171. pmc.ncbi.nlm.nih.gov
- American Association for Public Opinion Research. Best Practices for Survey Research. aapor.org
- American Association for Public Opinion Research (2023). Standard Definitions: Final Dispositions of Case Codes and Outcome Rates for Surveys (10-е изд.). aapor.org
- Pew Research Center. Writing Survey Questions. pewresearch.org
- Krosnick, J. A., & Presser, S. (2010). Question and questionnaire design. In P. V. Marsden & J. D. Wright (ред.), Handbook of Survey Research (2-е изд.). Emerald.
- Creswell, J. W., & Creswell, J. D. (2018). Research Design: Qualitative, Quantitative, and Mixed Methods Approaches (5-е изд.). SAGE.
- SuperSurvey (2026). The SuperSurvey Response Benchmark: 2 274 520 прохождений 25 112 опросов, с 16 сентября 2023 по 25 августа 2026 года. Методическая заметка на этой странице.