Метод Дельфи — Итеративный метод достижения консенсуса экспертов
- Автор метода
- Norman Dalkey and Olaf Helmer (RAND Corporation)
- Год
- 1950s–1963
- Тип
- Iterative expert consensus technique
- Семейство
- Data collection
Этот текст переведён машинным способом и ещё не проверен. Читать оригинал на английском
Что он делает?
Метод Дельфи — это структурированный многораундовый метод сбора данных, который собирает и уточняет мнения экспертов посредством итерационных анкет и контролируемой обратной связи.
Разработанный в корпорации RAND в 1950-х годах, он предназначен для того, чтобы свести разрозненную группу экспертов к надежному консенсусу по сложным, неопределенным или ориентированным на будущее вопросам — без давления на конформизм, присущего очным групповым дискуссиям.
Интуиция метода
Представьте, что вы собираете тридцать специалистов с разных континентов для согласования клинических рекомендаций, но вы не можете собрать их в одном помещении и не хотите, чтобы самый активный эксперт доминировал. Метод Дельфи решает эту проблему, отправляя вопросы раундами: эксперты отвечают анонимно, видят статистическое резюме ответов всех остальных, а затем пересматривают свои позиции. Поскольку обратная связь анонимна и агрегирована — обычно это медиана или межквартильный размах — каждый эксперт может видеть свое положение относительно группы и пересмотреть его без социального давления. Раунды продолжаются до тех пор, пока ответы не стабилизируются, что приводит к обоснованному суждению группы экспертов, а не к мнению одного человека.
История
Метод Дельфи был разработан Норманом Далки и Олафом Хельмером в корпорации RAND в начале 1950-х годов как засекреченный инструмент прогнозирования, впервые опубликованный в открытом доступе в статье Management Science 1963 года. Название отсылает к Дельфийскому оракулу, отражая его первоначальную цель — получение экспертных прогнозов. Редактированный том Гарольда Линстоуна и Мюррея Туроффа 1975 года «Метод Дельфи: Техники и Приложения» утвердил его как основной исследовательский инструмент. С 1980-х годов техника широко применялась в здравоохранении, образовании и политических исследованиях. Онлайн-варианты появились в 2000-х годах, а форматы реального времени и электронного Дельфи сейчас доминируют в практике.
Когда применять
Используйте метод Дельфи, когда вам требуется структурированное экспертное суждение по теме, по которой нет эмпирических данных или существующие доказательства недостаточны, спорны или крайне неопределенны — например, для прогнозирования тенденций в области технологий, разработки профессиональных стандартов или приоритизации исследовательских программ. Он хорошо подходит, когда эксперты географически распределены, когда анонимность необходима для предотвращения предвзятости авторитета или группового мышления, и когда несколько раундов пересмотра осуществимы в рамках вашего графика. Не используйте Дельфи, когда требуется быстрое решение (три или более раунда занимают недели или месяцы), когда тема требует участия заинтересованных сторон, а не только экспертных знаний, или когда выборка квалифицированных экспертов слишком мала (менее семи) для получения значимого распределения.
Ограничения и замечания
- Трудоемкость: два-четыре раунда с синтезом между каждым раундом обычно занимают от шести недель до нескольких месяцев.
- Отсев респондентов между раундами может сократить и без того небольшую панель до нерепрезентативной части.
- Консенсус может отражать эффект якоря или давление к конвергенции, а не подлинное согласие экспертов, особенно когда представление обратной связи предвзято.
- Качество результатов сильно зависит от экспертизы и репрезентативности участников панели — плохо подобранная панель приводит к вводящему в заблуждение консенсусу.
- Метод извлекает мнения экспертов, а не эмпирические данные; консенсус не равен правильности.
Условия из источника не заменяют независимую научную проверку или валидацию аналитическим движком.
Сильные стороны
- Анонимность нейтрализует социальное давление и предвзятость авторитета, позволяя реально пересматривать позиции в ходе раундов.
- Географически распределенные эксперты могут участвовать без поездок, расширяя пул талантов.
- Контролируемый цикл обратной связи обеспечивает измеримую конвергенцию — консенсус может быть количественно оценен, а не предполагаем.
- Гибкий формат позволяет использовать количественные оценки, ранжирования и качественные обоснования в рамках одного инструмента.
- Прозрачное представление разногласий: меньшинства и их обоснования сохраняются наряду с выводами консенсуса.
Применение
- Разработка клинических рекомендаций и критериев диагностики на основе консенсуса в медицине и сестринском деле.
- Приоритизация исследовательских программ в областях, где эмпирические данные скудны или противоречивы.
- Прогнозирование технологических разработок, рыночных тенденций или последствий политики на горизонте 5–20 лет.
- Определение и взвешивание критериев для рамок оценки, стандартов аккредитации или разработки учебных программ.
- Достижение междисциплинарного согласия по терминологии, системам классификации или рамкам компетенций.
- Политический Дельфи: намеренное выявление и структурирование различных экспертных позиций для информирования процесса принятия государственных решений, а не форсирование единого консенсуса.
Как это работает
Как это работает
Целевая выборка экспертов — обычно от 10 до 30 человек, хотя в крупных политических исследованиях используются панели до 100 человек — набирается на основе подтвержденных знаний по теме. Анонимность между участниками панели сохраняется на протяжении всего процесса; эксперты знают только агрегированные статистические данные об ответах друг друга, а не индивидуальные атрибуции.
Первый раунд обычно является открытым: экспертов просят перечислить ключевые факторы, критерии или риски, связанные с основным вопросом. Их ответы качественно анализируются и сводятся в структурированный список пунктов (утверждений, критериев, шкал оценок), который формирует анкету, используемую в последующих раундах.
После каждого раунда команда фасилитаторов количественно оценивает ответы — вычисляя медианы, средние значения, межквартильные размахи и процент согласия — и готовит отчет о контролируемой обратной связи. Этот отчет показывает каждому эксперту его собственный предыдущий ответ наряду с распределением группы, позволяя прямое сравнение без раскрытия того, кто что сказал.
Эксперты получают отчет с обратной связью и заполняют пересмотренную анкету, имея возможность сохранить или изменить свою позицию в свете консенсуса группы. Обычно им предлагается предоставить обоснование, если их ответ выходит за пределы межквартильного размаха. Обычно проводится от двух до четырех раундов; раунды прекращаются при достижении заранее определенных критериев остановки (стабильность, порог консенсуса или лимит раундов).
Консенсус оценивается количественно — распространенные пороги включают не менее 70–80% согласия в определенной категории ответов или межквартильный размах в один балл по шкале или менее. Распределение ответов экспертов в последнем раунде, медианы и любые dissenting rationales составляют основной результат и сообщаются вместе с уровнем консенсуса.
Частые ошибки
- Пренебрежение управлением отсевом: неспособность отправлять напоминания, сокращать инструменты в поздних раундах или заменять выбывших может привести к тому, что в последнем раунде останется слишком мало респондентов для заявления о консенсусе.
- Преждевременное закрытие: прекращение после только одного раунда, потому что ответы выглядят одинаково, методологически недостаточно — требуется как минимум два раунда, чтобы продемонстрировать стабильность.
- Предвзятое представление обратной связи: представление медианы группы таким образом, который косвенно побуждает выбросы к конформизму, подрывает анонимность и искажает механизм контролируемой обратной связи.
- Нечеткие критерии остановки: пороги консенсуса (например, процент согласия, пороговое значение IQR) должны быть определены до сбора данных, а не выбраны после просмотра результатов.
- Путаница Дельфи с опросом: однократный опрос экспертов не является Дельфи — итерационная структура, основанная на обратной связи, является определяющей особенностью.
Часто задаваемые вопросы
Сколько раундов необходимо для исследования Дельфи?
Минимум два раунда необходимы для демонстрации того, что ответы были пересмотрены с учетом обратной связи группы и что стабильность была проверена. Большинство исследований используют два-четыре раунда; три — наиболее распространенное число. Прекращение оправдано при достижении заранее определенного критерия стабильности или консенсуса, а не просто по истечении времени.
Насколько большой должна быть панель экспертов?
Универсального правила нет, но диапазон от 10 до 30 участников является наиболее часто цитируемым рабочим диапазоном. Ключевое требование заключается в том, чтобы участники панели в совокупности охватывали область экспертизы, относящуюся к вопросу. Панели размером менее 7–10 человек слишком узки для получения стабильного распределения группы; очень большие панели (более 100) усложняют синтез и увеличивают риск отсева.
Что отличает Дельфи от обычного экспертного опроса?
Обычный экспертный опрос собирает ответы один раз. Дельфи итеративен: эксперты видят анонимную обратную связь о распределении группы после каждого раунда и могут пересмотреть свои ответы. Этот контролируемый цикл обратной связи в сочетании с анонимностью является определяющей особенностью, отличающей Дельфи от однораундового экспертного опросника.
Как определяется и сообщается консенсус?
Пороги консенсуса должны быть установлены до сбора данных. Распространенные критерии включают: не менее 70–80% ответов, попадающих в определенную категорию, межквартильный размах в один балл или менее по шкале Лайкерта, или коэффициент вариации ниже выбранного порога. В окончательном отчете должны быть указаны использованный порог, достигнутый уровень для каждого пункта, а также медиана вместе с межквартильным размахом.
Можно ли проводить Дельфи онлайн?
Да. Платформы электронного Дельфи и Дельфи в реальном времени (такие как SurveyMonkey, Qualtrics или специализированные инструменты, такие как программное обеспечение RAND/UCLA Appropriateness Method) позволяют асинхронное участие и автоматический расчет обратной связи. Онлайн-доставка снижает логистическую нагрузку и может сократить время между раундами, но требует тщательного внимания к безопасности данных и аутентификации участников.
Похожие методы
Источники
Dalkey, N., & Helmer, O. (1963). An experimental application of the Delphi method to the use of experts. Management Science, 9(3), 458–467.
Открыть ссылку DOIСкопировано.Linstone, H. A., & Turoff, M. (Eds.). (1975). The Delphi Method: Techniques and Applications. Addison-Wesley.
Открыть ссылку на публикациюСкопировано.