Skip to content
Назад к результатам поиска

Проверка участниками (Member Checking) и валидация респондентами

Автор метода
Yvonna Lincoln and Egon Guba
Год
1985
Тип
Method
Семейство
trustworthiness-assurance

Этот текст переведён машинным способом и ещё не проверен. Читать оригинал на английском

Размер шрифта

Что он делает?

Проверка участниками — это процедура обеспечения качества в качественных исследованиях, в ходе которой исследователь делится предварительными результатами, интерпретациями или аналитическими темами с участниками исследования и спрашивает, точно ли результаты отражают их точки зрения и опыт.

Разработанная Линкольн и Губой (Lincoln and Guba, 1985) как критерий достоверности, проверка участниками считается ключевым методом обеспечения убедительности и снижения риска неверной интерпретации исследователем. Цель состоит в том, чтобы убедиться, что исследователь правильно понял участников, а интерпретации основаны на реальном осмыслении участниками, а не на предположениях исследователя. Проверка участниками может проводиться в разное время исследования (после индивидуальных интервью, после первоначального анализа или после написания черновиков результатов) и принимать различные формы (индивидуальная обратная связь, групповая валидация, интерактивное обсуждение).

Интуиция метода

Исследователи, интерпретирующие качественные данные, подвержены ошибкам — мы неправильно понимаем, навязываем свои рамки, упускаем нюансы или акцентируем детали, которые участники считают второстепенными. Проверка участниками вводит этап верификации: спросите участников, соответствует ли ваша интерпретация их опыту. Это особенно важно, когда исследователь является посторонним для сообщества, когда результаты неожиданны или противоречат заявленным целям участников, или когда интерпретации являются теоретическими или абстрактными, а не близкими к языку участников. Проверка участниками выполняет две функции: она может исправлять ошибки интерпретации исследователя и признает участников партнерами в интерпретации, а не просто источниками данных. Утверждение участника: «Да, это именно то, что я имел в виду» укрепляет уверенность в интерпретации; несогласие побуждает исследователя пересмотреть свои предположения. Такой совместный подход повышает как точность, так и этичность представления данных.

История

Линкольн и Губа (Lincoln and Guba, 1985) ввели проверку участниками как один из нескольких критериев установления достоверности в качественных исследованиях, позиционируя ее наряду с убедительностью, переносимостью, надежностью и подтверждаемостью. Проверка участниками получила распространение в исследованиях в области здравоохранения и оценке как метод обеспечения качества. Недавние работы (Birt et al., 2016) поставили под сомнение предположения о проверке участниками: хотя участники часто подтверждают результаты, они могут не быть уверены в своих суждениях или уступать авторитету исследователя, что потенциально ограничивает эффект метода в повышении достоверности. Карлсон (Carlson, 2010) подчеркнул риск влияния исследователя на то, как проводится проверка участниками. Современная практика перешла к более тонкому использованию: проверка участниками как одна из стратегий обеспечения достоверности в сочетании с другими (рефлексивность, триангуляция, прозрачная методология), а не как единственное решение.

Когда применять

Проверка участниками рекомендуется в качественных исследованиях, особенно когда достоверность и представление интересов участников имеют центральное значение. Она особенно ценна в исследованиях, где исследователь является посторонним или когда результаты культурно специфичны и высок риск недопонимания. Проверка участниками укрепляет исследования в разведочных, партисипативных или общинных исследованиях, где ценится сотрудничество. Однако проверка участниками не всегда необходима или уместна: в некоторых контекстах соблюдение конфиденциальности (опасения по поводу идентификации участников) или временные ограничения могут ограничивать осуществимость. Исследователи могут сбалансировать идеалы с практическими ограничениями, проводя проверку участниками с подгруппой участников или в одной точке анализа.

Ограничения и замечания

  • Участники могут не быть уверены в собственной интерпретации или уступать авторитету исследователя; несогласие может отражать динамику власти, а не истинное несогласие.
  • Социальная желательность: участники могут подтверждать результаты из вежливости или желания угодить исследователю, предоставляя ложную валидацию.
  • Бремя и доступ: обращение к участникам за обратной связью требует времени и усилий; участники могут быть недоступны или не желать дальнейшего участия.
  • Влияние исследователя: то, как исследователь представляет результаты, формулирует вопросы и реагирует на обратную связь, формирует то, что говорят участники; проверка участниками не устраняет этого влияния.
  • Непонимание цели: участники могут ожидать, что проверка участниками означает, что они имеют окончательный редакционный контроль или что вся их обратная связь будет учтена, создавая нереалистичные ожидания.

Условия из источника не заменяют независимую научную проверку или валидацию аналитическим движком.

Сильные стороны

  • Проверяет точность: участники могут исправить неверные интерпретации исследователя, уменьшая ошибки и повышая уверенность в результатах.
  • Уважает участников как коллабораторов: признает их экспертизу и агентность, а не рассматривает их как пассивные источники данных.
  • Захватывает неявное знание: участники часто уточняют или дополняют результаты, когда им предоставляется возможность, добавляя глубину интерпретации.
  • Выявляет слепые зоны: участники замечают слепые зоны исследователя или культурные недоразумения, которые исследователь может упустить.
  • Укрепляет достоверность исследования: демонстрирует читателям, что интерпретации основаны на реальном осмыслении участниками, а не на предположениях исследователя.

Применение

  • Исследование здоровья и болезней: обмен результатами об опыте пациентов или барьерах в получении медицинской помощи с пациентами для проверки точности и актуальности.
  • Партисипативное исследование с участием сообщества: вовлечение членов сообщества в интерпретацию для обеспечения того, чтобы результаты отражали ценности и приоритеты сообщества.
  • Организационные исследования: обмен результатами об организационных изменениях или культуре с сотрудниками для проверки точности и получения дополнительной информации.
  • Образовательные исследования: обмен результатами об опыте студентов или практике учителей с педагогами для обеспечения актуальности и точности.
  • Исследование внедрения: проверка результатов о барьерах и факторах, способствующих внедрению программы, с практикующими специалистами, которые реализуют программы.

Как это работает

Как это работает

1

Решите, когда и в какой форме проводить проверку участниками. Ранняя проверка участниками: после каждого интервью обобщите услышанное и попросите участника внести исправления или уточнения. Поздняя проверка участниками: после кодирования и первоначального анализа поделитесь предварительными темами с участниками и спросите, соответствуют ли темы их опыту. Решите, кого включить: всех участников (наиболее тщательный подход) или целенаправленно отобранную подгруппу (более осуществимый вариант). Подготовьте материалы для обратной связи: краткое изложение тем с подтверждающими цитатами, черновик раздела с результатами или сфокусированный синтез. Для ранней проверки это может быть устная форма (рефлексия в конце интервью, электронное письмо с просьбой подтвердить). Для поздней проверки предоставьте письменные материалы, чтобы у участников было время обдумать и ответить. Предоставьте участникам время для обратной связи; не торопите. Создайте пространство для несогласия: явно спросите: «Соответствует ли это вашему опыту?» и «Что бы вы изменили?». Представьте это как совместное уточнение, а не как проверку согласия участников с вашими выводами.

2

Проанализируйте обратную связь от проверки участниками. Согласие (участники подтверждают интерпретации) повышает уверенность в точности. Несогласие (участники исправляют или оспаривают интерпретации) одинаково ценно — оно сигнализирует о том, что ваша интерпретация упустила важный нюанс или неверно поняла смысл. Документируйте обратную связь: что сказали участники? Как изменились результаты в ответ? Выявила ли проверка участниками недопонимание, которое скорректировало ваш анализ? Оцените согласованность: если несколько участников подтверждают тему, уверенность возрастает; если интерпретация оспаривается некоторыми участниками, такое расхождение имеет аналитическое значение. Синтезируйте обратную связь в пересмотренные результаты. Отслеживайте изменения, внесенные на основе проверки участниками, чтобы читатели понимали, как обратная связь повлияла на интерпретации. Некоторые исследователи сообщают о частоте и характере обратной связи (например, «Все 8 участников подтвердили темы; 3 предложили дополнения к третьей теме, которые были включены»).

Частые ошибки

  • Представление интерпретаций в излишне абстрактном или теоретическом языке, который участники не могут легко оценить; сделайте материалы для обратной связи доступными и основанными на примерах.
  • Задавание наводящих вопросов («Разве вы не думаете, что X?» вместо «Соответствует ли это вашему опыту?»); формулируйте вопросы нейтрально, чтобы поощрить искреннюю обратную связь.
  • Использование проверки участниками в качестве окончательного этапа утверждения, а не возможности верификации; проверка участниками должна углублять понимание, а не требовать консенсуса.
  • Игнорирование несогласия: если участник оспаривает интерпретацию, отнеситесь к этому серьезно, а не отвергайте как мнение одного человека.
  • Чрезмерная опора на проверку участниками для валидации; проверка участниками — это один из многих методов обеспечения достоверности. Комбинируйте с другими методами (триангуляция, рефлексивность, комплексные данные).

Часто задаваемые вопросы

Когда следует проводить проверку участниками — во время сбора данных или после анализа?

Оба варианта ценны. Проверка участниками во время сбора данных (немедленная рефлексия и уточнение после интервью) позволяет выявить недоразумения на раннем этапе. Проверка участниками после анализа (обмен черновиками результатов) подтверждает интерпретации и темы. Если позволяют ресурсы, проводите оба варианта. Если вам придется выбирать, проверка участниками после анализа ключевых тем обычно более ценна, чем немедленное уточнение в ходе интервью.

Следует ли связываться со всеми участниками для проверки или с подгруппой?

Связь со всеми участниками — идеальный, но ресурсоемкий вариант. Репрезентативная подгруппа (стратифицированная по ключевым характеристикам или опыту) обеспечивает баланс между осуществимостью и полнотой. Стремитесь получить обратную связь от 20–30% участников. Если вы не можете найти некоторых участников, задокументируйте это и объясните, как это повлияло на результаты.

Что делать, если участники не согласны с моей интерпретацией?

Несогласие — это ценные данные. Исследуйте: правильно ли вы поняли? Изменились ли воспоминания участника со временем? Равны ли по валидности несколько интерпретаций? Если обратная связь участника выявляет подлинное недопонимание, пересмотрите свою интерпретацию. Если несогласие отражает разные точки зрения или субъективный опыт, признайте вариативность: «Большинство участников подчеркнули X, но некоторые отметили Y». Несогласие обогащает результаты.

Что делать, если участники просят изменить цитаты или отредактировать результаты?

Объясните протоколы конфиденциальности и этического комитета (IRB): вы не можете удалить идентифицирующие цитаты из результатов без потери аналитической силы. Однако, если участники обеспокоены идентификацией, работайте вместе над дальнейшей анонимизацией или контекстуализацией цитат. Если участники просят отредактировать целые результаты, которые их расстраивают, обсудите этические аспекты: исследование должно быть честным в отношении того, что было обнаружено, но исследователь несет ответственность за избежание ненужного вреда. Ключевыми являются переговоры и прозрачность.

Обязательно ли использовать всю обратную связь от проверки участниками?

Нет. Проверка участниками — это верификация, а не построение консенсуса. Используйте обратную связь для углубления понимания и исправления подлинных ошибок. Если обратная связь противоречит данным других участников или вашему детальному анализу, вы можете с уважением не согласиться. Обоснуйте свое решение: «Хотя один участник не согласился с этой интерпретацией, данные от X других участников и детальный анализ интервью подтверждают эту тему». Прозрачность позволяет читателям оценить интерпретацию.

Похожие методы

Источники

  1. Lincoln, Y. S., & Guba, E. G. (1985). Naturalistic Inquiry. SAGE Publications.

    ISBN: 978-0803924314
    Скопировано.
  2. Birt, L., Scott, S., Cavers, D., Campbell, C., & Walter, F. (2016). Member checking: A tool to enhance trustworthiness or merely a nod to validation? Qualitative Health Research, 26(13), 1802-1811.

    Открыть ссылку DOI
    Скопировано.
  3. Carlson, J. A. (2010). Avoiding traps in member checking. The Qualitative Report, 15(5), 1102-1113.

    Открыть ссылку на публикацию
    Скопировано.
  4. Tong, A., Sainsbury, P., & Craig, J. (2007). Consolidated criteria for reporting qualitative research (COREQ): A 32-item checklist for interviews and focus groups. International Journal for Quality in Health Care, 19(6), 349-357.

    Открыть ссылку DOI
    Скопировано.