Анекдотичните доказателства са история, разказана от хора. Той се предлага в много форми, които могат да варират от препоръки за продукти до уста на уста. Това често е свидетелство или кратък разказ за истинността или ефективността на дадено твърдение. Обикновено анекдотичните доказателства се фокусират върху индивидуални резултати, движат се от емоции и се представят от лица, които не са експерти по предметната област.

Следват примери за анекдотични доказателства:

  • Еха! Взех тази добавка и отслабнах много! Това хапче трябва да работи!
  • Познавам някой, който пушеше в продължение на десетилетия и никога не е причинил някакво значително заболяване. Тези твърдения за пушене са преувеличени!
  • Този крем против стареене отне години наред. Трябва да е най-доброто!

подмамят
Сигурен съм, че сте чували, че не можете да се доверите на анекдотични доказателства. И все пак ние все още питаме нашите приятели за препоръки относно ресторанти, дестинации за пътуване, автомеханици и т.н. Трудното при анекдотичните доказателства е, че дори когато дадена история е вярна, тя все още може да бъде напълно подвеждаща. Как става това?

В тази публикация ще ви покажа защо не можете да се доверите на анекдотични доказателства!

Статистическа методология срещу анекдотични доказателства

Таблицата по-долу показва как статистическата и научната методология са противоположни на анекдотични доказателства.

Факторите са променливите, които експериментаторите контролират по време на експеримент, за да определят техния ефект върху променливата на отговора. Факторът може да приеме само малък брой стойности, които са известни като факторни нива. Факторите могат да бъдат категориална променлива или базирани на непрекъсната променлива, но използват само ограничен брой стойности, избрани от експериментаторите. ANOVA и дизайнът на експериментите използват фактори широко. Например изучавате фактори, които биха могли да повлияят на спортните постижения. Вие решавате да включите следните два фактора в експеримента си:
ФакторМарка на оборудванетоСтайна температура
НивоAНиско (65F)
НивоБ.Среден (70F)
Ниво Високо (75F)
Марката на оборудването е категорична променлива. Може да бъде само тип А или тип В. От друга страна, температурата в помещението, в което се провежда обучението, е непрекъсната променлива. В този експеримент обаче температурата е фактор, защото експериментаторите задават само три температурни настройки: 65F, 70F и 75F.

Бърз поглед върху таблицата трябва да е достатъчен, за да ви убеди, че анекдотичните доказателства не са надеждни! Обаче е още по-лошо благодарение на психологически фактори, които ни карат да вярваме в тези истории.

Хората са по-склонни да разказват и помнят драматични, необикновени лични истории. Хвърлете малко емоция и е по-вероятно да повярвате на историята. В психологически план, статистическият анализ на данните, които са внимателно събрани от добре проектирани експерименти, няма този емоционален удар. Тъжно, но истина.

Освен това, ако B следва A, нашите мозъци са свързани, за да приемем, че A причинява B.

И накрая, анекдотични доказателства череша избира най-добрите истории. Не чувате за всички неуспешни случаи, защото хората са по-малко склонни да говорят за тях.

Така че, ако Фред разказва емоционална история за това как е взел добавка и след това е отслабнал много, ще запомним историята на Фред и ще приемем, че добавката е причинила загуба на тегло. За съжаление не чуваме останалите 10 души, които са приемали добавката и не са отслабнали. Също така не знаем какво друго може да прави Фред, за да отслабне.

Тези фактори колективно пристрастяват изводите, направени от анекдотични доказателства към необичайни резултати и неоправдани причинно-следствени връзки.

След това ще илюстрирам проблемите графично и ще обясня как Статистика

Графично илюстрира недостатъците на анекдотичните доказателства

Графиката по-долу показва резултатите от анекдотични истории на хора, които са приемали хипотетична добавка за отслабване. Помислете за тази диаграма като обобщение на резултатите, представени в телевизионна реклама. Дори ще предположим, че тези хора казват пълната истина. Добавката изглежда ефективна, нали? Те са отслабнали много! Когато видите хората и чуете техните емоционални истории за загуба на тегло, ние искаме да вярваме, че добавката е действала.

За съжаление, графиката не предоставя пълната история. Не забравяйте, че анекдотичните доказателства използват малки неслучайни проби, които не могат да бъдат обобщени извън извадката. Хората може би са били подбрани за техните разкази или може би са представили приказките по собствена инициатива. Така или иначе, това е пример, базиран на драматична и емоционално завладяваща история. Както казва дребният шрифт, резултатите им не са типични!

За съжаление, умовете ни са живи, за да повярват на този тип доказателства. Отдаваме по-голяма тежест на драматични, лични истории.

Научно изследване на добавката за отслабване

Сега, нека си представим, че провеждаме научно изследване, използвайки по-съществена, Проба

В статистиката популация е пълният набор от всички обекти или хора от интерес. Обикновено проучванията в началото определят тяхната популация, която ги интересува. Популациите могат да имат краен размер, но потенциално много голям. Например, Всички клапани, произведени от конкретен завод
Всички възрастни жени в САЩ
Всички пушачи

Популациите също могат да имат безкраен размер. Например, безкрайните популации се използват за всички възможни резултати от поредица от опити, като например обръщане на монета.

В тази графика сините точки представляват приемащите добавки, а червените точки онези, които не са приели добавката.

Тези резултати не са толкова впечатляващи, колкото другата графика. Някои от тези, които са приемали добавката, наистина са загубили теглото, показано в телевизионната реклама, но много повече са загубили много по-малко тегло. Тези хора не излязоха с по-малко вълнуващите си истории!

Освен това тези, които не са приемали добавката, отговарят на същия модел като тези, които са го направили. Като цяло приемането на добавката не води до по-голяма загуба на тегло от контролната група.

Тъй като това проучване използва случайна извадка, а не самоизбрана извадка, имаме основания да вярваме, че можем да приложим тези резултати извън извадката.

Как статистиката бие анекдотични доказателства

В статистиката има два основни метода за определяне дали хранителната добавка причинява загуба на тегло: наблюдателни проучвания и рандомизирани контролирани проучвания (RCT).

В наблюдателно проучване учените измерват всички подходящи променливи в представителна извадка и след това генерират статистически модел, който описва ролята на всяка променлива. За всеки субект измервате променливи като базален метаболизъм, упражнения, диета, здраве и т.н., както и консумацията на хранителни добавки. След вас Фактори

Факторите са променливите, които експериментаторите контролират по време на експеримент, за да определят техния ефект върху променливата на отговора. Факторът може да приеме само малък брой стойности, които са известни като факторни нива. Факторите могат да бъдат категориална променлива или базирани на непрекъсната променлива, но използват само ограничен брой стойности, избрани от експериментаторите. ANOVA и дизайнът на експериментите широко използват фактори. Например изучавате фактори, които биха могли да повлияят на спортните постижения. Вие решавате да включите следните два фактора в експеримента си:
ФакторМарка на оборудванетоСтайна температура
НивоAНиско (65F)
НивоБ.Среден (70F)
Ниво Високо (75F)
Марката на оборудването е категорична променлива. Може да бъде само тип А или тип В. От друга страна, температурата в помещението, в което се провежда обучението, е непрекъсната променлива. В този експеримент обаче температурата е фактор, защото експериментаторите задават само три температурни настройки: 65F, 70F и 75F.

Рандомизираните контролирани проучвания (RCT) са другият метод. RCT са златният стандарт, тъй като ви позволяват да правите причинно-следствени заключения относно ефекта от лечението

Вземането на решения въз основа на анекдотични доказателства не винаги може да бъде вредно. Например, ако поискате от приятел препоръка за ресторант, рискът е нисък, особено ако знаете вкусовете му. Ако обаче вземате важни решения относно неща като финанси, здравеопазване и фитнес, не ги основавайте на анекдотични доказателства. Погледнете научните данни и експертните анализи, въпреки че те не са толкова блестящи, колкото емоционално заредени истории, представени от хора, които могат да се разберат!

Ако откриете, че сте спечелени от анекдотични доказателства, напомнете си, че резултатите не са типични!

Някога анекдотични доказателства са ви повлияли?