Тесты и опросы — Российская газета
Свежий номер
РГ-Неделя
Родина
Тематические приложения
Союз
Свежий номер
12.04.2023Общество
Млечный путь, Лайка и Кедр: Викторина ко Дню космонавтики
12.04.2023Культура
Тест: Кто вы из героев Островского?
09.04.2023Общество
Проверьте себя: сможете ли вы сделать новое задание ЕГЭ по истории?
08.04.2023Общество
Проверьте знания по химии перед досрочным ЕГЭ — тест
27.03.2023Общество
Тест: сможете ли вы сдать базовый ЕГЭ по математике?
21.03.2023Общество
Тест: Помните ли вы факты о Земле из учебника по географии за 5 класс?
21.03.2023Общество
Попробуйте не завалить ЕГЭ по русскому — тест
18.03.2023Культура
Тест: Проверьте себя, помните ли вы роман «Анна Каренина»?
13.
03.2023Культура
Тест к 110-летию Сергея Михалкова: Помните ли вы фамилию Дяди Степы?
07.03.2023Общество
Наши в Лувре: что вы знаете о женщинах в русском искусстве? Тест «РГ»
06.03.2023Общество
Коптер, треш и кринж: Есть ли в словаре это слово? Тест «РГ»
21.02.2023Власть
В Вологодской области стали продавать первые квартиры в деревянных домах. В чем заключается их перспективность для рынка жилья в России
15.02.2023
Опрос «РГ»: Что вы думаете о бессмертии?
14.02.2023Digital
Волшебник диалогового окна: На что способен ChatGPT, какую магию творит нейросеть и как с ней пообщаться в России
11.02.2023Общество
Помните ли вы «Госпожу Пенициллин» и Софью Ковалевскую — тест о великих женщинах в науке
08.
02.2023Культура
Юнга, яхтсмен и плодовитый писатель. Тест ко дню рождения Жюля Верна
04.02.2023Экономика
Почему ни растительное, ни искусственное мясо не смогло заменить натуральное
02.02.2023Общество
Тест к годовщине разгрома фашистов под Сталинградом — помните ли вы историю Великой Отечественной
09.01.2023Общество
Новинки в ЕГЭ-2023 по русскому — тест на знание паронимов. Проверьте себя
01.01.2023Культура
Тест: что дарили и получали в подарок русские классики?
31.12.2022Общество
Тест: Помните ли вы лучшие новогодние фильмы?
30.12.2022Общество
На эти вопросы ответит тот, кто родился и жил в СССР — тест
25.12.2022Общество
Опрос: Как и чем кормить школьников?
24.
12.2022Общество
24 декабря — День воинской славы России. Пройдите тест, какие исторические даты вы помните
08.12.2022Общество
Тест: Проверь себя — получится правильно ответить на вопросы ЕГЭ?
30.11.2022Общество
В школах Москвы не планируют вводить единую форму
|
Проведите опрос или голосование. Блоки BF913 и BF918 в категории «Форма и кнопка».
Арт-директор Алексей Шепелин объясняет, как в этом помогает хороший дизайн.
Какие бывают дизайнеры
cc. Если вы больше не хотите получать рассылку, нажмите: UNSUBSCRIBE8 способов проведения тестирования и 7 основных преимуществ
Вы можете потратить много времени, денег и усилий на разработку потребительского или исследовательского опроса, поэтому вы хотите быть уверены, что он эффективен и легко понятен. Но как это узнать, не отправляя свой опрос потенциальным участникам? Путем проведения опросного тестирования. Так как же протестировать опрос и какой метод тестирования подходит именно вам?
Создайте тестовый опрос, анкету или форму прямо сейчас!
Что такое обзорное тестирование?
Тестирование опроса означает выполнение опросом серии тестов для выявления потенциальных проблем. Тестирование может помочь выявить любые проблемы с опросом, прежде чем вы отправите его своим ключевым участникам. Потенциальные проблемы включают:
- Запутанные или очень деликатные вопросы
- Плохая логика вопроса и поток
- Волнение из-за длины съемки
- Плохой дизайн или схема обследования
- Источники систематической ошибки обследования
- Технические сбои или сбои безопасности
Отсеивая проблемы в тесте-опросе, вы можете избежать головной боли в будущем и убедиться, что ваши окончательные данные точны и применимы к действиям.
Конечно, тестирование опроса может быть довольно простым или очень сложным делом. Например, если вы небольшая компания, это может означать простое тестирование проекта опроса с несколькими сотрудниками. С другой стороны, если вы проводите крупное исследование, вам может потребоваться провести пилотный тест и пройти все методы тестирования, которые мы рассмотрим далее.
8 способов проведения тестирования опроса
Существует несколько способов тестирования вашего опроса перед его рассылкой. В зависимости от сложности вашего опроса вы можете выбрать один метод, комбинацию методов или использовать их все вместе.
1. Предварительное тестирование
Предварительное обследование, также известное как стычка или опрос респондентов, включает неформальное тестирование неструктурированного опроса или вопросника с выборкой потенциальных респондентов, которые могут пролить свет на любые потенциальные проблемы. Чтобы получить их отзывы, необходимо добавить несколько оценочных вопросов в конец вашего опроса.
Это могут быть открытые или закрытые вопросы, касающиеся содержания опроса, его понимания, приемлемости, сложности, дизайна и продолжительности.
2. Пилотное тестирование
В отличие от предварительного тестирования, пилотное тестирование предполагает формальное тестирование вашего полного структурированного опроса на небольшой выборке респондентов. Вместо того, чтобы задавать оценочные вопросы, респондентам предоставляется опрос как есть, и их просят заполнить его. Пилотное тестирование вашего опроса, иногда называемое пробным прогоном, генеральной репетицией или программным запуском, дает представление о том, какие ответы вы получите, и о любых проблемах, которые могут возникнуть в течение реального периода опроса.
3. Анализ данных
После предварительного или пилотного тестирования может помочь выполнить некоторый анализ данных. Это включает в себя изучение закономерностей в ответах, чтобы увидеть, где произошло замешательство, колебание, отстраненность или отсев.
Вас часто можно обнаружить, выявив прямолинейность (всегда проверяется один и тот же ответ, независимо от вопроса), вопросы без ответов и непоследовательные или нереалистичные ответы. Узнайте больше об этих методах анализа в нашем блоге по очистке данных.
4. Когнитивное интервьюирование
Что на самом деле происходит в головах ваших респондентов, когда они отвечают на вопросы вашего опроса? Когнитивное интервьюирование может докопаться до сути этого. Эти интервью проводятся лично с небольшой выборкой респондентов (обычно около 5-15 человек). Когда они отвечают на каждый вопрос анкеты, ведущий просит их подумать вслух, описывая их мыслительные процессы, эмоциональные реакции и понимание того, что означает каждый вопрос. Эти интервью могут помочь определить, является ли вопрос двусмысленным, сбивающим с толку или вызывает у людей дискомфорт из-за его содержания. Они также могут выявить риски отсева, определяя, скучают ли респонденты или взволнованы опросом.
5.
Экспертная оценкаИногда полезно получить мнение эксперта, особенно если в вашем опросе задаются вопросы по сложной теме. Тематические эксперты могут использовать свои глубокие знания, чтобы оценить ваши вопросы, чтобы помочь сформировать или изменить содержание. Методологов опроса также могут попросить помочь определить наилучшие способы сбора точных данных для вопросов исследования.
6. Фокус-группы
Фокус-группа – это полуструктурированное обсуждение с небольшой группой людей, обычно около десяти человек, во главе с модератором. Члены группы могут очень помочь в составлении вопросов и решении некоторых из следующих вопросов:
- Релевантность предмета для группы
- Характеристики целевой группы
- Понимание вопросов и понятий
- Сложность обследования и способности группы
- Общая групповая реакция на формулировку и дизайн опроса
Хотя фокус-группы могут быть очень полезными, существует опасность «группового разговора», когда проблемы могут создаваться и преувеличиваться, поскольку участники группы «подпитывают» друг друга во время обсуждений.
7. Эксперименты по A/B-тестированию
Еще один замечательный метод опросного тестирования — эксперименты по A/B-тестированию. Для этого необходимо разделить выборку респондентов на две части и предоставить каждому разные варианты опроса. Этот метод может быть эффективным способом понять, как изменения в формулировках или порядке вопросов, дизайне или макете опроса, а также другие методологические факторы могут повлиять на респондентов и данные, которые вы собираете.
8. Наблюдательные исследования
Этот метод тестирования опроса предполагает, что выборка респондентов заполняет ваш опрос, пока наблюдатель наблюдает за ними. Наблюдатель — это, как правило, тот, кто является экспертом в наблюдении за языком тела и выражением лица. Они часто могут определить, чувствует ли человек дискомфорт, скуку, возбуждение и другие эмоции. Чтобы обсервационные исследования сработали, респондентам нужно сказать, что тестируется опрос, а не их реакции, чтобы они не разыгрывали спектакль.
7 Преимущества опросного тестирования
Опросное тестирование имеет множество преимуществ, некоторые из которых мы уже обсуждали. Вот наши семь основных преимуществ.
1. Сокращение потерь
Предварительное тестирование помогает избежать дорогостоящего и трудоемкого процесса отказа от ошибочного опроса и начала его заново. Кроме того, вам нужно будет набирать новых респондентов (использование одних и тех же респондентов может привести к предвзятости опроса), что требует дополнительных усилий и, более чем вероятно, расходов.
2. Улучшение репутации
Если вы опубликуете недостоверный опрос, это может плохо отразиться на вашей компании или исследовании и напрасной трате времени и усилий респондентов. К тому же, если вы сделаете неточные выводы, основанные на данных, полученных в результате ошибочного опроса, ваши коллеги и общественность будут считать вас ненадежным в ваших исследованиях.
3. Улучшение принятия решений
Неточные данные, собранные в ходе некорректного опроса, могут привести к тому, что ваша компания примет неверные решения, а исследователи придут к неверным выводам.
Тестирование опроса, чтобы убедиться, что респонденты его понимают, приведет к более точным ответам, когда будет отправлена окончательная версия, что улучшит процесс принятия решений.
4. Поддержание соответствия
Есть ли проблема с безопасностью вашего опроса? Когда дело доходит до личной информации людей, это важно как никогда, особенно с введением соответствия GDPR. Протестировав свой опрос, прежде чем выпускать его в большом количестве, можно выявить и устранить технические сбои и проблемы с безопасностью до того, как будет нанесен какой-либо ущерб.
5. Экономия денег
Если вы используете физические маркетинговые стратегии, такие как купоны прямой почтовой рассылки, информационные бюллетени или журналы, и рассылаете их незаинтересованным людям на основании ошибочных данных, вы потратите много денег впустую. Разработка нового продукта на основе ошибочных данных может обойтись вам еще дороже!
6. Выявление проблем
Мы рассмотрели этот вопрос, но повторим еще раз: тестирование опроса может выявить все типы проблем, от пугающей длины опроса до неоднозначно сформулированных вопросов, от плохого дизайна до ошибочной логики опроса.
Конечно, когда проблемы обнаружены, найти решения намного проще!
7. Повышение производительности
Если вы начнете действовать на основе данных, полученных в результате ошибочного опроса, будь то создание маркетингового плана или подготовка исследовательской работы, вы в конечном итоге потратите свое время впустую, потому что респонденты не поняли или плохо взаимодействовали с ваш опрос. Собирая точные ответы после тестирования опроса, производительность повышается независимо от того, что вы собираетесь делать с данными.
Заключение
Всегда важно проверить свой опрос, прежде чем отправлять его в массы. Конечно, как и в случае с любым типом процесса обратной связи, тестирование бесполезно, если вы не будете действовать в соответствии с результатами. Требуется ли для этого переработка опроса, переписывание вопросов или переоснащение системы безопасности, важно, чтобы вы не пренебрегали тем, что узнали. И, если вы попробуете один метод тестирования опроса и не обнаружите никаких проблем, вы можете положить этому конец или использовать другой метод, просто чтобы быть в безопасности.
В любом случае, тестирование с помощью опроса может значительно сэкономить время и деньги!
Готовы создать тестовый опрос? SurveyLegend упрощает работу благодаря нашим предварительно разработанным, безопасным и адаптивным шаблонам. Начните сегодня!
Вы регулярно проводите тест-опрос? Какой метод тестирования опроса вы предпочитаете? Дайте нам знать об этом в комментариях!
Создайте тестовый опрос, анкету или форму прямо сейчас!
Часто задаваемые вопросы
Что такое обзорное тестирование?
Тестирование опроса включает в себя проведение вашего опроса через серию тестов для проверки таких проблем, как запутанные вопросы, плохой дизайн или технические сбои.
Почему следует использовать опросное тестирование?
Путем тестирования опроса маркетологи и исследователи могут выявить потенциальные проблемы до того, как опрос будет отправлен основной группе участников.
Это может сэкономить время, деньги, усилия и смущение.
В чем разница между предварительным и пилотным опросом?
Предтестовый опрос носит неформальный характер и требует от небольшой выборки участников оставить отзыв об опросе после его завершения для выявления проблем. Пилотный опрос носит формальный характер и не требует обратной связи; вместо этого результаты анализируются внутри, чтобы попытаться выявить проблемы.
Тестирование обследования
ТЕСТИРОВАНИЕ ОБСЛЕДОВАНИЯ
Введение
Тестирование обследования является важной частью процесса разработки обследования и дает рекомендации относительно:
- адекватности основы выборки
- изменчивость обследуемой совокупности по предмету обследования
- ожидаемая доля неответов и эффективность мер, направленных на сокращение неответов
- пригодность метода сбора данных, включая тестирование различных методов для определения наиболее подходящего
- адекватность анкеты, включая тестирование альтернативных версий для определения наиболее эффективной
- эффективность обучения интервьюеров и адекватность инструкций по обследованию
- категорий ответов, которые будут использоваться для предварительно закодированных вопросов
- вероятная стоимость и продолжительность частей обследования и обследования в целом
- организация обследования.
В некоторых случаях данные, собранные в ходе тестов, могут быть полезными предварительными показателями результатов обследования; оценка ошибки выборки, размеров выборки и изменчивости совокупности; и оценка вероятной частоты ответов. Эти предварительные результаты будут включать меньшую выборку и, следовательно, будут давать более высокие стандартные ошибки, которые необходимо учитывать.
ТИПЫ ТЕСТИРОВАНИЯ
Существует два основных типа тестирования, которые можно использовать для оценки обследования: качественное тестирование и количественное тестирование. В рамках качественного тестирования используются такие методы, как перестрелки, фокус-группы, предварительное тестирование и наблюдательные исследования. Пилотное тестирование и генеральные репетиции являются количественными тестами. Каждый тип тестирования используется на разных этапах разработки опроса и направлен на проверку различных аспектов опроса.
Перестрелка
Стычка — это процесс неформального тестирования дизайна анкеты с группами респондентов.
Анкета в основном неструктурирована и тестируется с группой людей, которые могут предоставить обратную связь по таким вопросам, как система взглядов на вопросы, уровень знаний, необходимый для ответа на вопросы, диапазон вероятных ответов на вопросы и то, как формулируются ответы. респондентами.
Фокус-группы
Фокус-группы обычно небольшие, так как большие группы трудно контролировать. Их должен возглавлять опытный ведущий, чья работа заключается в контроле группового обсуждения и обеспечении того, чтобы у всех участников была возможность высказать свое мнение. При проведении фокус-групп вы должны решить следующие вопросы:
- Соответствующий тематический опыт группы,
- Характеристики целевого населения,
- Насколько хорошо участники понимают используемые понятия и определения,
- Способности группы (например, могут ли они добавлять числа, если их попросят) и
- Какова общая реакция группы на формулировку и расположение формы.
Фокус-группы могут помочь нам уточнить наше представление о респондентах как в целом, так и в отношении важных подгрупп нашего опроса.
Неформальные обсуждения проводятся с фокус-группами, чтобы получить представление об отношении, проблемах и ответах группы, связанных с вопросником. При введении нового вопросника весьма полезно собрать вместе несколько вероятных респондентов и обсудить затронутые вопросы. В результате этих обсуждений могут появиться такие вещи, как доступность данных и информация о людях, которые лучше всего подходят для их предоставления.
Объем довольно специфической информации, полученной от фокус-групп, означает, что в зависимости от характера исследуемых понятий или вопросов требуется только одна или две фокус-группы.
Из-за того, что фокус-группы изучают очень специфические вопросы, их не следует использовать в качестве единственного метода тестирования нового или пересмотренного вопросника. Другая опасность, связанная с фокус-группами, возникает из-за феномена, называемого «групповой речью», когда проблемы могут нарастать до преувеличенных масштабов, поскольку члены группы «подпитывают» друг друга во время обсуждений.
Предварительное тестирование (также известное как Стыковка)
Предварительное тестирование — это процесс неофициального тестирования дизайна анкеты с потенциальными респондентами. Анкета в основном неструктурирована и тестируется с группой людей, которые могут предоставить отзывы по таким вопросам, как система координат вопросов, концепции, уровень знаний, необходимых для ответа на вопросы, диапазон вероятных ответов на вопросы и то, как ответы формулируются респондентами. Предварительное тестирование также используется для выявления очевидных недостатков или неудобных формулировок вопросников, а также для тестирования альтернативных дизайнов. На этом этапе мы можем использовать открытые категории ответов для проработки вероятных ответов. Анкета должна быть переработана после предварительного тестирования.
Наблюдательные исследования
Наблюдательные исследования предполагают заполнение респондентами черновика анкеты в присутствии наблюдателя.
При заполнении формы респонденты объясняют свое понимание вопросов и методов, необходимых для предоставления информации. Многое можно извлечь из таких исследований, включая выявление проблемных вопросов посредством наблюдений, вопросов, задаваемых респондентами, или времени, затрачиваемого на ответы на конкретные вопросы. Доступность данных и наиболее подходящее лицо для предоставления информации также можно получить с помощью обсервационных исследований. Респонденты должны быть осведомлены о том, что тестируется форма, а не респондент. Респонденту не следует оказывать помощь в заполнении формы.
Пилотное тестирование
Пилотное тестирование включает формальное тестирование анкеты или опроса на небольшой репрезентативной выборке респондентов. Полузакрытые вопросы можно использовать для сбора ряда вероятных ответов, которые впоследствии используются для разработки более структурированной анкеты с закрытыми вопросами. Пилотное тестирование используется для выявления любых проблем, связанных с формой, таких как формат анкеты, длина или формулировка вопроса, и позволяет сравнить альтернативные версии анкеты.
Пилотное тестирование также можно использовать для оценки адекватности инструкций интервьюерам и определения времени опроса. Для нового обследования может потребоваться несколько пробных испытаний, прежде чем методология обследования будет признана удовлетворительной.
Генеральная репетиция
Генеральная репетиция — это заключительный пробный запуск обследования, при котором выбранная методология выборки используется для отбора небольшой выборки из целевой совокупности. Генеральные репетиции используются для выявления любых проблем, которые могут возникнуть в системе планирования обследования и/или обработки. Генеральные репетиции также дают возможность получить данные о затратах на обследование и оценить дисперсию населения. Административные расходы, включая среднее время интервью, а также наличные расходы, безусловно, полезны при принятии решений о кадровых и бюджетных мероприятиях. Оценки дисперсии генеральной совокупности, соответствующие рассматриваемому плану (или планам) выборки, могут потребоваться для прогнозирования ошибок выборки любых предлагаемых планов выборки.
При наличии соответствующей информации из предыдущих обследований можно будет оценить изменчивость населения и затраты на основе этой информации, а не по результатам генеральной репетиции.
ПРОВЕДЕНИЕ ОБЗОРНЫХ ИСПЫТАНИЙ
Состав обзорных тестов
После принятия решения о процедурах тестирования следующим шагом является определение того, как эти тесты будут проводиться. Образцы, выбранные для пилотных испытаний и генеральных репетиций, должны быть максимально репрезентативными для целевой совокупности. Это максимизирует достоверность результатов испытаний и гарантирует, что последующие модификации обследования будут уместными. Выборка может быть выбрана с использованием выборки по суждению для получения достаточно репрезентативного метода выборки или с использованием методов вероятностной выборки. Наблюдательные исследования и тестирование в фокус-группах не требуют проведения репрезентативных выборок.
Сравнение методов
Сравнение пилотных тестов и генеральных репетиций можно использовать в качестве основы для выбора между альтернативными процедурами для части обследования.
Один из подходов к такому тестированию может состоять в том, чтобы распределить между интервьюерами две выборки одинакового размера, и каждый интервьюер использует обе альтернативные процедуры. Затем эти два метода можно сравнить без мешающей предвзятости, связанной с разной работой интервьюеров.
Частота и объем тестов
Количество тестов, которое необходимо проводить в ходе обследования, и размеры используемой выборки определяются сложностью обследования и наличием средств. Например, для простого небольшого опроса может потребоваться только 50 респондентов для генеральной репетиции, тогда как для более крупного и сложного опроса может потребоваться 200 или более респондентов.
АНАЛИЗ РЕЗУЛЬТАТОВ ТЕСТИРОВАНИЯ
Результаты тестирования обследования могут выявить ряд проблем с вопросником и планом обследования. Некоторые из этих проблем могут быть выявлены во время предварительного тестирования; другие могут быть идентифицированы только тогда, когда вопросник задается выборке целевой группы населения во время пилотного тестирования или генеральной репетиции.
Проблемы с анкетами
Длинные анкеты часто пугают респондентов, заставляя их торопиться с вопросами или отказываясь продолжать. Это может привести к высокому проценту неответов и общему непониманию вопросов. Плохая структура и объяснение вопросов также могут привести к тому, что на вопросы не будут даны ответы или даны несколько ответов, когда следует выбрать только один. Другие проблемы, которые могут быть выявлены, включают большое количество ответов «Другое» на конкретный вопрос, отсутствие вариантов ответов на вопрос и общее непонимание вопроса.
Решения проблем с анкетами
Решение этих проблем может заключаться в последовательности вопросов, инструкциях, сопровождающих вопросы, формулировках вопросов и предоставленных категориях ответов. Изменение категорий ответов может привести к большему разнообразию ответов на вопрос. Мы можем сделать это, увеличив список категорий ответов, изменив порядок списка или даже изменив акцент вопроса и/или категорий ответов.
