Panel stacking is a threat to consensus statement validity
Kasper Kepp
(1)
,
Preben Aavitsland
(2)
,
Marcel Ballin
,
Francois Balloux
(3)
,
Stefan Baral
,
Kevin Bardosh
,
Howard Bauchner
,
Eran Bendavid
,
Raj Bhopal
,
Daniel Blumstein
,
Paolo Boffetta
,
Florence Bourgeois
,
Adam Brufsky
,
Peter Collignon
,
Sally Cripps
,
Ioana Cristea
,
Nigel Curtis
,
Benjamin Djulbegovic
,
Oliver Faude
,
Maria Elena Flacco
,
Gordon Guyatt
,
George Hajishengallis
,
Lars Hemkens
,
Tammy Hoffmann
,
Ari Joffe
,
Terry Klassen
,
Despina Koletsi
,
Dimitrios Kontoyiannis
,
Ellen Kuhl
,
Carlo La Vecchia
(4)
,
Tea Lallukka
,
John Lambris
,
Michael Levitt
,
Spyros Makridakis
,
Helena Maltezou
,
Lamberto Manzoli
,
Ana Marusic
,
Clio Mavragani
,
David Moher
,
Ben Mol
,
Taulant Muka
,
Florian Naudet
(5, 6, 7)
,
Paul Noble
,
Anna Nordström
(8, 9)
,
Peter Nordström
(10)
,
Nikolaos Pandis
,
Stefania Papatheodorou
(11)
,
Chirag Patel
(12)
,
Irene Petersen
,
Stefan Pilz
,
Nikolaus Plesnila
(13)
,
Anne-Louise Ponsonby
(14)
,
Manuel Rivas
(15)
,
Andrea Saltelli
,
Manuel Schabus
,
Michaéla Schippers
(16)
,
Holger Schünemann
,
Marco Solmi
(17)
,
Andreas Stang
(18)
,
Hendrik Streeck
(19)
,
Joachim Sturmberg
(20)
,
Lehana Thabane
(21)
,
Brett Thombs
(22)
,
Athanasios Tsakris
,
Simon Wood
(23)
,
John P.A. Ioannidis
(1)
1
Stanford University
2 UiB - University of Bergen
3 UCL - University College of London [London]
4 UNIMI - Università degli Studi di Milano = University of Milan
5 Centre Hospitalier Universitaire de Rennes [CHU Rennes] = Rennes University Hospital [Pontchaillou]
6 CIC - Centre d'Investigation Clinique [Rennes]
7 Irset - Institut de recherche en santé, environnement et travail
8 Umeå University, Sweden
9 UiT - The Arctic University of Norway [Tromsø, Norway]
10 Uppsala University
11 Harvard T.H. Chan School of Public Health
12 HMS - Harvard Medical School [Boston]
13 LMU - Ludwig Maximilian University [Munich] = Ludwig Maximilians Universität München
14 University of Melbourne
15 Stanford School of Medicine [Stanford]
16 Erasmus University Rotterdam
17 University of Ottawa [Ottawa]
18 AöR - University Hospital Essen
19 Universität Bonn = University of Bonn
20 UoN - University of Newcastle [Callaghan, Australia]
21 McMaster University [Hamilton, Ontario]
22 McGill University = Université McGill [Montréal, Canada]
23 Edin. - University of Edinburgh
2 UiB - University of Bergen
3 UCL - University College of London [London]
4 UNIMI - Università degli Studi di Milano = University of Milan
5 Centre Hospitalier Universitaire de Rennes [CHU Rennes] = Rennes University Hospital [Pontchaillou]
6 CIC - Centre d'Investigation Clinique [Rennes]
7 Irset - Institut de recherche en santé, environnement et travail
8 Umeå University, Sweden
9 UiT - The Arctic University of Norway [Tromsø, Norway]
10 Uppsala University
11 Harvard T.H. Chan School of Public Health
12 HMS - Harvard Medical School [Boston]
13 LMU - Ludwig Maximilian University [Munich] = Ludwig Maximilians Universität München
14 University of Melbourne
15 Stanford School of Medicine [Stanford]
16 Erasmus University Rotterdam
17 University of Ottawa [Ottawa]
18 AöR - University Hospital Essen
19 Universität Bonn = University of Bonn
20 UoN - University of Newcastle [Callaghan, Australia]
21 McMaster University [Hamilton, Ontario]
22 McGill University = Université McGill [Montréal, Canada]
23 Edin. - University of Edinburgh
Marcel Ballin
- Fonction : Auteur
Stefan Baral
- Fonction : Auteur
Kevin Bardosh
- Fonction : Auteur
Howard Bauchner
- Fonction : Auteur
Eran Bendavid
- Fonction : Auteur
Raj Bhopal
- Fonction : Auteur
Daniel Blumstein
- Fonction : Auteur
Paolo Boffetta
- Fonction : Auteur
Florence Bourgeois
- Fonction : Auteur
Adam Brufsky
- Fonction : Auteur
Peter Collignon
- Fonction : Auteur
Sally Cripps
- Fonction : Auteur
Ioana Cristea
- Fonction : Auteur
Nigel Curtis
- Fonction : Auteur
Benjamin Djulbegovic
- Fonction : Auteur
Oliver Faude
- Fonction : Auteur
Maria Elena Flacco
- Fonction : Auteur
Gordon Guyatt
- Fonction : Auteur
George Hajishengallis
- Fonction : Auteur
Lars Hemkens
- Fonction : Auteur
Tammy Hoffmann
- Fonction : Auteur
Ari Joffe
- Fonction : Auteur
Terry Klassen
- Fonction : Auteur
Despina Koletsi
- Fonction : Auteur
Dimitrios Kontoyiannis
- Fonction : Auteur
Ellen Kuhl
- Fonction : Auteur
Tea Lallukka
- Fonction : Auteur
John Lambris
- Fonction : Auteur
Michael Levitt
- Fonction : Auteur
Spyros Makridakis
- Fonction : Auteur
Helena Maltezou
- Fonction : Auteur
Lamberto Manzoli
- Fonction : Auteur
Ana Marusic
- Fonction : Auteur
Clio Mavragani
- Fonction : Auteur
David Moher
- Fonction : Auteur
Ben Mol
- Fonction : Auteur
Taulant Muka
- Fonction : Auteur
Florian Naudet
- Fonction : Auteur
- PersonId : 14054
- IdHAL : florian-naudet
- ORCID : 0000-0003-3760-3801
- IdRef : 142630837
Paul Noble
- Fonction : Auteur
Nikolaos Pandis
- Fonction : Auteur
Irene Petersen
- Fonction : Auteur
Stefan Pilz
- Fonction : Auteur
Andrea Saltelli
- Fonction : Auteur
Manuel Schabus
- Fonction : Auteur
Holger Schünemann
- Fonction : Auteur
Athanasios Tsakris
- Fonction : Auteur
John P.A. Ioannidis
Connectez-vous pour contacter l'auteur
- Fonction : Auteur correspondant
- PersonId : 1082135
Connectez-vous pour contacter l'auteur
Résumé
Consensus statements can be very influential in medicine and public health. Some of these statements use systematic evidence synthesis but others fail on this front. Many consensus statements use panels of experts to deduce perceived consensus through Delphi processes. We argue that stacking of panel members toward one particular position or narrative is a major threat, especially in absence of systematic evidence review. Stacking may involve financial conflicts of interest, but nonfinancial conflicts of strong advocacy can also cause major bias. Given their emerging importance, we describe here how such consensus statements may be misleading, by analyzing in depth a recent high-impact Delphi consensus statement on COVID-19 recommendations as a case example. We demonstrate that many of the selected panel members and at least 35% of the core panel members had advocated toward COVID-19 elimination (Zero-COVID) during the pandemic and were leading members of aggressive advocacy groups. These advocacy conflicts were not declared in the Delphi consensus publication, with rare exceptions. Therefore, we propose that consensus statements should always require rigorous evidence synthesis and maximal transparency on potential biases toward advocacy or lobbyist groups to be valid. While advocacy can have many important functions, its biased impact on consensus panels should be carefully avoided.