Słownik metodologiczny · Schematy badań

Konsensus ekspertów – jak go zdefiniować, osiągnąć i opisać

Konsensus ekspertów to uzgodnione stanowisko panelu, gdy brakuje wystarczających danych z badań. Pokazujemy główne metody, dlaczego definicja konsensusu decyduje o wyniku i jak to opisać w pracy.

Strona główna / Słownik / Konsensus ekspertów

Opracowanie merytoryczne: · Opublikowano: · Aktualizacja:

W skrócie: Konsensus ekspertów to stanowisko, na które zgadza się określona z góry część panelu ekspertów, uzyskane ustrukturyzowaną metodą (np. delficką albo grupą nominalną). Definicja konsensusu musi powstać przed zbieraniem ocen, bo sam wybór progu zmienia liczbę „uzgodnionych” pozycji.

Co to jest konsensus ekspertów?

Konsensus ekspertów (ang. expert consensus) to stanowisko, które popiera ustalona z góry część panelu specjalistów, uzyskane według jawnej procedury. Jones i Hunter (1995) wskazują, że metody konsensusu przydają się tam, gdzie opublikowanych danych jest za mało albo są sprzeczne: pozwalają wtedy wykorzystać wiedzę ekspertów do podjęcia decyzji. Tak powstają wytyczne kliniczne, listy kontrolne i definicje pojęć, a w psychometrii także oceny pozycji nowej skali (zob. trafność treściowa).

Metody dochodzenia do konsensusu

  • Metoda delficka – anonimowe rundy ankiet z informacją zwrotną; eksperci nie muszą się spotykać; przebieg pokazuje wpis metoda delficka krok po kroku.
  • Technika grupy nominalnej – ustrukturyzowane spotkanie: każdy zgłasza pomysły, grupa je omawia, a potem członkowie głosują lub nadają rangi.
  • Spotkanie panelu – często jako etap końcowy po rundach ankiet.

Przy rangach zgodność panelu można dodatkowo opisać współczynnikiem W Kendalla. Do raportowania całego procesu służy wytyczna ACCORD z listą 35 pozycji, opracowana właśnie zmodyfikowaną metodą delficką (Gattrell i in., 2024).

Przykład: ten sam panel, różne progi

Dwunastu ekspertów ocenia 20 pozycji jako „ważne” lub „nieważne” (dane symulowane). Przy progu 70% i 75% konsensus osiąga 13 pozycji, przy 80% – 8, a przy 90% – już tylko 6. Progi 70% i 75% dają tu ten sam wynik, bo przy 12 osobach zgoda 9 ekspertów to dokładnie 75%. Wniosek: liczba „uzgodnionych” pozycji zależy od definicji, dlatego Diamond i in. (2014) postulują jej podawanie z góry – w ich przeglądzie definicję konsensusu miało tylko 72 ze 100 badań delfickich.

Jak opisać w pracy

Konsensus zdefiniowano przed zebraniem ocen jako zgodę co najmniej 75% członków panelu (12 ekspertów). Kryterium to spełniło 13 z 20 ocenianych pozycji. Przy bardziej rygorystycznym progu 80% konsensus osiągnęłoby 8 pozycji. Proces raportowano zgodnie z wytyczną ACCORD.

Na co uważać

  • Dobór ekspertów decyduje o wyniku. Opisz kryteria i skład panelu.
  • Nie myl konsensusu ze zgodnością sędziów. Kappa i ICC mierzą niezależne oceny – zob. zgodność sędziów.
  • Zgoda to nie prawda. W ocenie pewności danych, np. w systemie GRADE, opinia ekspertów nie zastępuje badań.
Przykład reprodukowalny

Próg konsensusu w R

Kod symuluje oceny 12 ekspertów dla 20 pozycji i liczy, ile pozycji osiąga konsensus przy różnych progach.

Liczba pozycji z konsensusem przy progach 70–90%

Dane wejściowe: oceny 0/1 („nieważne”/„ważne”) od 12 ekspertów dla 20 pozycji (dane symulowane).

Co odczytać: rozkład odsetków zgody i wiersz pozycje_z_konsensusem dla każdego progu.

R
set.seed(254)
n_eksp <- 12; n_poz <- 20
p_zgody <- runif(n_poz, 0.45, 0.98)                 # skłonność panelu do uznania pozycji za ważną
oceny <- sapply(p_zgody, function(p) rbinom(n_eksp, 1, p))
zgoda <- round(100 * colMeans(oceny), 1)            # odsetek ekspertów oceniających pozycję jako ważną
progi <- c(70, 75, 80, 90)
print(table(zgoda))
print(sapply(progi, function(pr) c(prog = pr, pozycje_z_konsensusem = sum(zgoda >= pr))))
Wynik w R
zgoda
33.3   50 58.3 66.7   75 83.3 91.7  100 
   1    1    2    3    5    2    3    3 
                      [,1] [,2] [,3] [,4]
prog                    70   75   80   90
pozycje_z_konsensusem   13   13    8    6

Bibliografia oprogramowania

Wyniki pochodzą z uruchomienia pokazanego kodu w R 4.5.3 (funkcje pakietu base i stats).

  1. R: R Core Team. (2026). R: A language and environment for statistical computing (Version 4.5.3) [Computer software]. R Foundation for Statistical Computing. https://www.R-project.org/

Najczęstsze pytania

Czy konsensus ekspertów jest dowodem naukowym?

To uporządkowana opinia, a nie wynik badania empirycznego. Przydaje się, gdy danych brakuje albo są sprzeczne, ale nie zastępuje dobrze przeprowadzonych badań. Opisz w pracy, na czym opierali się eksperci.

Jaki procent zgody uznać za konsensus ekspertów?

Nie ma jednej normy. Często spotyka się progi 70–80%, ale ważniejsze jest, by próg ustalić i zapisać przed zbieraniem ocen oraz podać go w metodzie.

Czym konsensus ekspertów różni się od zgodności sędziów?

Zgodność sędziów (kappa, ICC) mierzy, czy niezależni oceniający dają te same oceny. Konsensus to proces dochodzenia do wspólnego stanowiska, często z wymianą informacji między rundami.

Powiązane hasła

Metoda delfickaW KendallaKappa FleissaGRADETrafność treściowa (CVI)

Poradniki, w których użyjesz tego pojęcia

Poradnik

Metoda delficka krok po kroku

Protokół, rundy i analiza konsensusu: reguła 70/15, mediana, IQR, odsetek zgody, stabilność i rezygnacje – z kodem R i wzorem opisu.

Czytaj →Poradnik

Zgodność sędziów: kappa, ICC, alfa

Kappa Cohena i ważona, kappa Fleissa, formy ICC i alfa Krippendorffa na jednym przykładzie z trzema sędziami: wybór miary, paradoksy kappy i raport.

Czytaj →

Potrzebujesz wsparcia w analizie danych?

Wybierz ofertę dopasowaną do pracy dyplomowej albo profesjonalnego projektu naukowego.

Wyceń analizęOferta dla studentów

Bibliografia i dalsza literatura naukowa (APA 7)

  1. Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
  2. Gattrell, W. T., Logullo, P., van Zuuren, E. J., Price, A., Hughes, E. L., Blazey, P., Winchester, C. C., Tovey, D., Goldman, K., Hungin, A. P., & Harrison, N. (2024). ACCORD (ACcurate COnsensus Reporting Document): A reporting guideline for consensus methods in biomedicine developed via a modified Delphi. PLOS Medicine, 21(1), Article e1004326. https://doi.org/10.1371/journal.pmed.1004326 ● Otwarty dostęp
  3. Jones, J., & Hunter, D. (1995). Qualitative research: Consensus methods for medical and health services research. BMJ, 311(7001), 376–380. https://doi.org/10.1136/bmj.311.7001.376 ● Otwarty dostęp: pełny tekst

Cytowania BibTeX

@article{diamond2014defining, author={Diamond, Ivan R. and Grant, Robert C. and Feldman, Brian M. and Pencharz, Paul B. and Ling, Simon C. and Moore, Aideen M. and Wales, Paul W.}, title={{Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies}}, journal={Journal of Clinical Epidemiology}, year={2014}, volume={67}, number={4}, pages={401--409}, doi={10.1016/j.jclinepi.2013.12.002}}
@article{gattrell2024accord, author={Gattrell, William T. and Logullo, Patricia and van Zuuren, Esther J. and Price, Amy and Hughes, Ellen L. and Blazey, Paul and Winchester, Christopher C. and Tovey, David and Goldman, Keith and Hungin, Amrit Pali and Harrison, Niall}, title={{ACCORD (ACcurate COnsensus Reporting Document): A reporting guideline for consensus methods in biomedicine developed via a modified Delphi}}, journal={PLOS Medicine}, year={2024}, volume={21}, number={1}, eid={e1004326}, doi={10.1371/journal.pmed.1004326}}
@article{jones1995consensus, author={Jones, Jeremy and Hunter, Duncan}, title={{Qualitative research: Consensus methods for medical and health services research}}, journal={BMJ}, year={1995}, volume={311}, number={7001}, pages={376--380}, doi={10.1136/bmj.311.7001.376}}
R