Самоекспериментиране, тестване с плацебо и великият заговор на Линус Полинг

Сет Робъртс е имал успех със самоекспериментиране - наред с други неща, той е написал успешна диетична книга за това как да отслабнете, като ядете ароматизирано олио или захарна вода - и в своя блог той съобщава за последните си експерименти и техните ефекти върху него. Например, наскоро той пише за полезните ефекти на ферментиралата храна.

великата

Когато Сет опитва нова храна или нова промяна в начина на живот и открие положителни ефекти, аз винаги съм скептичен: може би той се надява на такива ефекти и след това ги намира. Но често те работят за други. Например неговият кореспондент Тъкър Макс пише:

Както и да е, след седмица пиене на две бутилки на ден, забелязах следните промени:

2. Имам повече енергия. Освен субективно да го усещам, виждам разликата в дневниците си за тренировки, точно през последната седмица надигнах повече упражнения, отколкото обикновено.

3. Чувствам се като цяло по-добре. Това би могло да бъде пристрастие към плацебо ефект/потвърждение, тъй като е много субективно измерване, но аз просто се чувствам по-добре. . . .

Разбира се, но може би това би могло всичко да бъде пристрастие за потвърждение. Тоалетните неща звучат обективно, но кой знае какво още се случва, когато прави това? И тогава, разбира се, има пристрастие към подбора, че Сет чува за успехите.

За да бъдем ясни: не се опитвам да критикувам това, което прави Сет, и не се опитвам да го сваля. Опитвам се да го укрепя, като предлагам начини за мислене за това. Както казва Сет, критиката е лесна, помагането на хората е трудно.

Така че тук е моята мисъл. Може би Сет може да опита истинско плацебо, както следва: той може да измисли някаква глупава храна или промяна в поведението (нещо като ... яде ферментирала храна! Или, не знам, спя с леглото наклонено под ъгъл от 10 градуса. Или не знам - Сет би бил по-добър от мен да измисли нещо. (Разбира се, трябва да бъде нещо, което първо опитва и не открива неблагоприятни ефекти.) След това би могъл да измисли доста неясна история за това как му е помогнало, след това да го публикува в блога си и да види какво се случва. Дали хората биха отговорили с истории за това колко полезно е било?

Големият заговор на Линус Полинг

Припомням си идеята, която веднъж чух, че Линус Полинг през цялото време е знаел, че мегадозите на витамин С нямат ефект и че алтруистично е жертвал репутацията си на учен, за да изтръгне добродетелите на витамин С, на теорията, че това ще намали страданието на милиони чрез плацебо ефекта.

7 коментара

забравихте да затворите скоба

Самоизпитванията имат малка научна валидност, но могат да бъдат много убедителни. Когато чуете историята, например, за хирург, който си прави операция, той привлича вниманието ви. Такъв анекдот може да бъде по-убедителен от безкрайно малка p-стойност.

От етична гледна точка може би е по-добре той да каже „Едно от тези три неща ми помогна: A, B и C. Другите две, които измислих. Моля, изпробвайте ги и ми уведомете за резултатите“. По този начин няма да има измама. Какво мислиш?

Съгласен съм с вас, че Сет може да избира само "победителите", както току-що направи, когато наскоро представи показанията ми в своя блог: http://www.blog.sethroberts.net/2009/03/01/nose-c…

Смятам обаче, че неговата теза е много ясна. Много от проучванията, които включват човешки субекти, са изключително скъпи от гледна точка на ангажираност, време и пари от страна на участващите участници, изследователи и финансиращи агенции. Следователно е много ясно, че изследванията, базирани на проучвания, вероятно са много потиснати от инерцията на организациите, посветени да предоставят резултати от изследвания в тази област.

Нека да взема друг пример и съм сигурен, че те са много други:

Да предположим, че детето ви е аутист. Понастоящем изследванията едва се вдлъбват в областта на диагностиката, както си спомняте (http://www.stat.columbia.edu/

cook/MT/mt-search.c ...) и така реално подобрение по отношение на систематичните лечения за различните видове увреждания почти не съществува. Нека вземем примера на литературата за витамин В6. На всеки няколко години има текущ преглед, който обобщава констатацията дали B6 може да помогне за облекчаване на някои от поведенческите и други аспекти

на болестта. Ето най-новото от PubMed:

моля, обърнете внимание как върви краят:

„... Това малко проучване (n = 8) измерва само коефициента на интелигентност и„ социалния коефициент “и установява статистически значима полза за коефициента на интелигентност (5,2, 95% ДИ = [0,2 до 10,3]), когато е в третираната група, като се използват резултати от промените. ЗАКЛЮЧЕНИЯ НА АВТОРИТЕ: Поради малкия брой проучвания, методологичното качество на изследванията и малките размери на пробите, не може да се направи препоръка относно използването на B6-Mg като лечение на аутизъм ... "

С други думи, може да работи, но повечето лекари, които преглеждат това, ще ви кажат, че не. В бъдеще със сигурност ще разберем, че аутизмът наистина е съвкупност от много различни заболявания и че само подгрупа наистина може да реагира на В6 по същия начин, по който изрязването на носа може да работи само за подгрупа от популацията.

Имайки предвид това, избира ли Сет победителите или идентифицира не малка част от популацията, която очевидно може да се възползва от неговите открития? Как да преминете от анекдотична случка към по-общо твърдение, когато тестването е скъпо ?

Колко удобно за Линус Полинг!

Следващият път, когато направя нещо глупаво в изследванията си, ще се придържам към твърдението, че съм го направил нарочно.

От това, което можех да прочета на Линус, егото му беше гигантско. По-вероятно е той да е инвестирал толкова много, че да не може да отстъпи.

Когато нещо успее да намали проблема, след като дузина други правдоподобни лечения са се провалили, „плацебо ефект“ е много малко вероятно обяснение. По същия начин неочакваните ефекти - като повишаване на настроението във вторник от лица, наблюдавани в понеделник сутринта - също е малко вероятно да се дължат на плацебо ефекти. Ако има случаи такива неща да се дължат на плацебо ефекти, бих искал да чуя за тях.

Re Tucker Макс. „Тоалетните неща звучат обективно, но кой знае какво още се случва, когато прави това?“ Той направи голяма промяна в диетата, която би могла да повлияе на храносмилането, и забеляза „тоалетни неща“, които не очакваше. Разбира се, това не е силно контролиран експеримент, но изглежда пренебрегвате това, което може да се научи от него - че комбуча вероятно е направил голяма разлика. Или, по-точно, че трябва да стане по-правдоподобно, че комбуча има големи ефекти.

Ако плацебо ефектите бяха силни и широко разпространени, колко проблеми ще останат? Просто бихме взели плацебо за всичко.

Както се казва в старата поговорка, „множествено число на анекдот са данни“. Когато започнете с размер на извадката 1, имате работа с анекдоти, но ако други хора го опитат и постигнат подобни резултати, тогава можете да имате реални данни и реален напредък.

Различните хора също реагират по различен начин на различни промени. Аз съм експериментирал с различни витаминни и минерални добавки от около 24 години. Нещата, които опитвам, са ефективни и ги продължавам; нещо, което опитвам, е неефективно, затова ги преустановявам. Обикновено в рамките на няколко дни знам какво изглежда работи. Преди да опитам някакъв витамин, не мога да предскажа дали ще работи или не, а през голяма част от времето не. Означава ли това, че успехите, които съм постигнал, са "плацебо ефект" или "пристрастие към потвърждение"? Не мисля така.

Например, силно вярвам в големи дози витамин С. По-рано всяка сутрин имах болки в корема за около 45 минути. Множество лекари ми казаха, че имам „чувствителен стомах“ и просто ще трябва да живея с него. Когато приемам достатъчно витамин С, болката изчезва изцяло.

В началото на 90-те години имах много чести инфекции на синусите в продължение на около 2 години. След 2 операции и месеци различни антибиотици пак имах проблеми. Инфекциите не се изчистиха, докато не повиших дозата на витамин С много висока (около 10 000 mg/ден) в продължение на няколко седмици. Това просто щастливо съвпадение ли беше, че синусите ми най-накрая се изчистиха?

Също така открих, че различните марки и формулировки на витамин С се различават по своята ефективност. Тази разлика изглежда не е свързана с цената на добавката или нейната реклама. Просто изпитвам по-силен ефект от някои марки и формулировки и не мога да го предвидя преди време. Това просто ли е подсъзнателен плацебо ефект или пристрастие към потвърждение?

Понякога други са имали подобни ефекти. В продължение на около 10 години по време и след проблемите със синусите, щях да кървя от носа за около 5 до 10 минути, почти всеки ден. Ходих при множество специалисти по УНГ, които изобщо не можеха да ми помогнат с проблема. След 10 години открих, че витамин А намалява и в крайна сметка прекратява кръвотечението от носа. Не знам защо работи. Никога не бих предположил, че работи. Никога не бях чел никъде, че работи. Изненадващо, добавките с бета каротин нямат подобен ефект. Току-що попаднах на витамин А. Преди няколко години колега на работа се оплака от подобен проблем с кървенето от носа през зимните месеци. Предложих да приемам добавки с витамин А и това също му подейства. И двамата ли бяхме обект на плацебо ефект? Не мисля така.

Самоекспериментирането е напълно валидно. Просто се уверете, че това, което правите, е фундаментално безопасно. Наистина е необходим някакъв център за координация, за да могат хората да обменят различни наблюдения. След това можем да оставим хората и „пазара“ на наблюденията да решат какво работи. Някои може да не смятат, че това е толкова строго, колкото „двойно-сляпо“ проучване, но реалните данни могат да помогнат за по-добрия живот на хората.