Те съобщаваха резултатите от проучване, публикувано във впечатляващия звучащ Международен архив на медицината, онлайн списание с отворен достъп. Авторите на изследването твърдят, че яденето на шоколад заедно с диета с ниско съдържание на въглехидрати е помогнало на хората да отслабнат и да повишат общото си благосъстояние в сравнение с хората, които току-що са яли диета с ниско съдържание на въглехидрати.

изследване

Проблемът е, че цялото проучване беше сложна измама.

Журналистът Джон Боханън и други разработиха, проведоха, публикуваха и публикуваха диетично проучване със съзнателно съмнителни научни заслуги, за да подчертаят как твърдения с малко или никаква научна подкрепа правят заглавия и карат модни диети, разкрива Боханън в io9.

Как го направиха

Проучването е замислено да бъде част от документален филм за индустрията за нежелана наука за диети, а създателите на филма разполагат с лекар (който да ръководи процеса) и статистик (за да играе с цифрите). Боханон, който има докторска степен по молекулярна биология на бактериите и позната история на успешни научни шеги, беше привлечен, за да помогне за публикуването и публикуването на изследването.

Те набраха 15 участници, на които бяха платени 150 евро, прожектирани за всякакви здравословни проблеми и казаха, че ще участват в документален филм за диетата - което беше вярно.

Ето, групата, която яде шоколад плюс диета с ниско съдържание на въглехидрати, отслабва с 10% по-бързо от групата на диета с ниско съдържание на въглехидрати без шоколад. Разликата беше статистически значима и Боханън имаше кука да продаде.

За Боханън не беше трудно да публикува изследването - списанията имат широко различни стандарти за партньорска проверка и много от тях приеха проучването. След като проучването беше прието, Боханън написа прессъобщение, създаде фалшив сайт за своя измислен изследователски център и - със сигурност - репортери започнаха да пишат за фалшивото проучване.

Изглеждаше, че са го извадили.

Какво означава

В разказа на Боханън за io9 той изброява големите немски всекидневници "Bild", германския уебсайт "Cosmopolitan" и германските и индийските уебсайтове "Huffington Post" сред новинарските издания, които попаднаха на измамата. Той включва и екранни снимки на отразяване от уебсайта "Prevention", няколко британски таблоида и юнския брой на списание "Shape".

Боанън изглежда доста доволен, че тези публикации с голяма аудитория взеха проучването му, „заблуждавайки милиони“, се казва в заглавието на io9. Но както отбеляза журналистът Даниел Енгбър в Twitter, може би все пак не беше такъв подвиг:

И все пак си струва да вземете предупреждението, за да бъдете малко по-скептични по отношение на съобщенията, че определена диета или храна имат големи ефекти върху вашето здраве - особено когато тези доклади се показват в таблоид.

Това проучване не се различава толкова от много други диетични проучвания, които също използват малки размери на пробите. За съжаление не е обичайно учените да променят данните си, като провеждат експеримент няколко пъти или изключват отклонения, за да получат статистически значими резултати, най-вече невинни.

Доброто изследване обикновено има хипотеза и след това го тества. Това проучване няма реална хипотеза и тества 18 различни неща - нито едно - за да се види дали се появяват някакви статистически значими асоциации. При лошо проектирани диетични проучвания това всъщност не е толкова необичайно. Ако в толкова малка група се измерват достатъчно неща, този подход непременно ще даде резултат. нещо. Боханън го обясни по следния начин:

Мислете за измерванията като за лотарийни билети. Всеки има малък шанс да се изплати под формата на „значителен“ резултат, който можем да завъртим и да продадем на медиите. Колкото повече билети купувате, толкова по-голяма е вероятността да спечелите. Не знаехме какво точно ще изпадне - заглавието можеше да бъде, че шоколадът подобрява съня или понижава кръвното налягане - но знаехме, че шансовете ни да получим поне един „статистически значим“ резултат са доста добри.

С други думи, докато проучването наистина е установило статистически значим ефект върху загубата на тегло, то е създадено да направи точно това. Те са статистически по-склонни да открият това, което изглежда като значителен ефект, но всъщност е случайност.

Поправка: Премахнахме препратка към екранна снимка на Daily Mail, включена в записите на io9, тъй като тяхната шоколадова история беше за друго проучване, а не за експеримента на Боханън.