Skip to content
Назад к результатам поиска

Метод Дельфи — Итеративный метод достижения консенсуса экспертов

Автор метода
Norman Dalkey and Olaf Helmer (RAND Corporation)
Год
1950s–1963
Тип
Iterative expert consensus technique
Семейство
Data collection

Этот текст переведён машинным способом и ещё не проверен. Читать оригинал на английском

Размер шрифта

Что он делает?

Метод Дельфи — это структурированный многораундовый метод сбора данных, который собирает и уточняет мнения экспертов посредством итерационных анкет и контролируемой обратной связи.

Разработанный в корпорации RAND в 1950-х годах, он предназначен для того, чтобы свести разрозненную группу экспертов к надежному консенсусу по сложным, неопределенным или ориентированным на будущее вопросам — без давления на конформизм, присущего очным групповым дискуссиям.

Интуиция метода

Представьте, что вы собираете тридцать специалистов с разных континентов для согласования клинических рекомендаций, но вы не можете собрать их в одном помещении и не хотите, чтобы самый активный эксперт доминировал. Метод Дельфи решает эту проблему, отправляя вопросы раундами: эксперты отвечают анонимно, видят статистическое резюме ответов всех остальных, а затем пересматривают свои позиции. Поскольку обратная связь анонимна и агрегирована — обычно это медиана или межквартильный размах — каждый эксперт может видеть свое положение относительно группы и пересмотреть его без социального давления. Раунды продолжаются до тех пор, пока ответы не стабилизируются, что приводит к обоснованному суждению группы экспертов, а не к мнению одного человека.

История

Метод Дельфи был разработан Норманом Далки и Олафом Хельмером в корпорации RAND в начале 1950-х годов как засекреченный инструмент прогнозирования, впервые опубликованный в открытом доступе в статье Management Science 1963 года. Название отсылает к Дельфийскому оракулу, отражая его первоначальную цель — получение экспертных прогнозов. Редактированный том Гарольда Линстоуна и Мюррея Туроффа 1975 года «Метод Дельфи: Техники и Приложения» утвердил его как основной исследовательский инструмент. С 1980-х годов техника широко применялась в здравоохранении, образовании и политических исследованиях. Онлайн-варианты появились в 2000-х годах, а форматы реального времени и электронного Дельфи сейчас доминируют в практике.

Когда применять

Используйте метод Дельфи, когда вам требуется структурированное экспертное суждение по теме, по которой нет эмпирических данных или существующие доказательства недостаточны, спорны или крайне неопределенны — например, для прогнозирования тенденций в области технологий, разработки профессиональных стандартов или приоритизации исследовательских программ. Он хорошо подходит, когда эксперты географически распределены, когда анонимность необходима для предотвращения предвзятости авторитета или группового мышления, и когда несколько раундов пересмотра осуществимы в рамках вашего графика. Не используйте Дельфи, когда требуется быстрое решение (три или более раунда занимают недели или месяцы), когда тема требует участия заинтересованных сторон, а не только экспертных знаний, или когда выборка квалифицированных экспертов слишком мала (менее семи) для получения значимого распределения.

Ограничения и замечания

  • Трудоемкость: два-четыре раунда с синтезом между каждым раундом обычно занимают от шести недель до нескольких месяцев.
  • Отсев респондентов между раундами может сократить и без того небольшую панель до нерепрезентативной части.
  • Консенсус может отражать эффект якоря или давление к конвергенции, а не подлинное согласие экспертов, особенно когда представление обратной связи предвзято.
  • Качество результатов сильно зависит от экспертизы и репрезентативности участников панели — плохо подобранная панель приводит к вводящему в заблуждение консенсусу.
  • Метод извлекает мнения экспертов, а не эмпирические данные; консенсус не равен правильности.

Условия из источника не заменяют независимую научную проверку или валидацию аналитическим движком.

Сильные стороны

  • Анонимность нейтрализует социальное давление и предвзятость авторитета, позволяя реально пересматривать позиции в ходе раундов.
  • Географически распределенные эксперты могут участвовать без поездок, расширяя пул талантов.
  • Контролируемый цикл обратной связи обеспечивает измеримую конвергенцию — консенсус может быть количественно оценен, а не предполагаем.
  • Гибкий формат позволяет использовать количественные оценки, ранжирования и качественные обоснования в рамках одного инструмента.
  • Прозрачное представление разногласий: меньшинства и их обоснования сохраняются наряду с выводами консенсуса.

Применение

  • Разработка клинических рекомендаций и критериев диагностики на основе консенсуса в медицине и сестринском деле.
  • Приоритизация исследовательских программ в областях, где эмпирические данные скудны или противоречивы.
  • Прогнозирование технологических разработок, рыночных тенденций или последствий политики на горизонте 5–20 лет.
  • Определение и взвешивание критериев для рамок оценки, стандартов аккредитации или разработки учебных программ.
  • Достижение междисциплинарного согласия по терминологии, системам классификации или рамкам компетенций.
  • Политический Дельфи: намеренное выявление и структурирование различных экспертных позиций для информирования процесса принятия государственных решений, а не форсирование единого консенсуса.

Как это работает

Как это работает

1

Целевая выборка экспертов — обычно от 10 до 30 человек, хотя в крупных политических исследованиях используются панели до 100 человек — набирается на основе подтвержденных знаний по теме. Анонимность между участниками панели сохраняется на протяжении всего процесса; эксперты знают только агрегированные статистические данные об ответах друг друга, а не индивидуальные атрибуции.

2

Первый раунд обычно является открытым: экспертов просят перечислить ключевые факторы, критерии или риски, связанные с основным вопросом. Их ответы качественно анализируются и сводятся в структурированный список пунктов (утверждений, критериев, шкал оценок), который формирует анкету, используемую в последующих раундах.

3

После каждого раунда команда фасилитаторов количественно оценивает ответы — вычисляя медианы, средние значения, межквартильные размахи и процент согласия — и готовит отчет о контролируемой обратной связи. Этот отчет показывает каждому эксперту его собственный предыдущий ответ наряду с распределением группы, позволяя прямое сравнение без раскрытия того, кто что сказал.

4

Эксперты получают отчет с обратной связью и заполняют пересмотренную анкету, имея возможность сохранить или изменить свою позицию в свете консенсуса группы. Обычно им предлагается предоставить обоснование, если их ответ выходит за пределы межквартильного размаха. Обычно проводится от двух до четырех раундов; раунды прекращаются при достижении заранее определенных критериев остановки (стабильность, порог консенсуса или лимит раундов).

5

Консенсус оценивается количественно — распространенные пороги включают не менее 70–80% согласия в определенной категории ответов или межквартильный размах в один балл по шкале или менее. Распределение ответов экспертов в последнем раунде, медианы и любые dissenting rationales составляют основной результат и сообщаются вместе с уровнем консенсуса.

Частые ошибки

  • Пренебрежение управлением отсевом: неспособность отправлять напоминания, сокращать инструменты в поздних раундах или заменять выбывших может привести к тому, что в последнем раунде останется слишком мало респондентов для заявления о консенсусе.
  • Преждевременное закрытие: прекращение после только одного раунда, потому что ответы выглядят одинаково, методологически недостаточно — требуется как минимум два раунда, чтобы продемонстрировать стабильность.
  • Предвзятое представление обратной связи: представление медианы группы таким образом, который косвенно побуждает выбросы к конформизму, подрывает анонимность и искажает механизм контролируемой обратной связи.
  • Нечеткие критерии остановки: пороги консенсуса (например, процент согласия, пороговое значение IQR) должны быть определены до сбора данных, а не выбраны после просмотра результатов.
  • Путаница Дельфи с опросом: однократный опрос экспертов не является Дельфи — итерационная структура, основанная на обратной связи, является определяющей особенностью.

Часто задаваемые вопросы

Сколько раундов необходимо для исследования Дельфи?

Минимум два раунда необходимы для демонстрации того, что ответы были пересмотрены с учетом обратной связи группы и что стабильность была проверена. Большинство исследований используют два-четыре раунда; три — наиболее распространенное число. Прекращение оправдано при достижении заранее определенного критерия стабильности или консенсуса, а не просто по истечении времени.

Насколько большой должна быть панель экспертов?

Универсального правила нет, но диапазон от 10 до 30 участников является наиболее часто цитируемым рабочим диапазоном. Ключевое требование заключается в том, чтобы участники панели в совокупности охватывали область экспертизы, относящуюся к вопросу. Панели размером менее 7–10 человек слишком узки для получения стабильного распределения группы; очень большие панели (более 100) усложняют синтез и увеличивают риск отсева.

Что отличает Дельфи от обычного экспертного опроса?

Обычный экспертный опрос собирает ответы один раз. Дельфи итеративен: эксперты видят анонимную обратную связь о распределении группы после каждого раунда и могут пересмотреть свои ответы. Этот контролируемый цикл обратной связи в сочетании с анонимностью является определяющей особенностью, отличающей Дельфи от однораундового экспертного опросника.

Как определяется и сообщается консенсус?

Пороги консенсуса должны быть установлены до сбора данных. Распространенные критерии включают: не менее 70–80% ответов, попадающих в определенную категорию, межквартильный размах в один балл или менее по шкале Лайкерта, или коэффициент вариации ниже выбранного порога. В окончательном отчете должны быть указаны использованный порог, достигнутый уровень для каждого пункта, а также медиана вместе с межквартильным размахом.

Можно ли проводить Дельфи онлайн?

Да. Платформы электронного Дельфи и Дельфи в реальном времени (такие как SurveyMonkey, Qualtrics или специализированные инструменты, такие как программное обеспечение RAND/UCLA Appropriateness Method) позволяют асинхронное участие и автоматический расчет обратной связи. Онлайн-доставка снижает логистическую нагрузку и может сократить время между раундами, но требует тщательного внимания к безопасности данных и аутентификации участников.

Похожие методы

Источники

  1. Dalkey, N., & Helmer, O. (1963). An experimental application of the Delphi method to the use of experts. Management Science, 9(3), 458–467.

    Открыть ссылку DOI
    Скопировано.
  2. Linstone, H. A., & Turoff, M. (Eds.). (1975). The Delphi Method: Techniques and Applications. Addison-Wesley.

    Открыть ссылку на публикацию
    Скопировано.