Пазете се от статистика Истината за приказката Шоколадът ви помага да отслабнете - Scimondo
Резултатите от проучване в момента циркулират в медиите по целия свят, според което шоколадът не само ви помага да отслабнете, но и намалява нивата на холестерола и насърчава здравословния сън. Сега авторът на изследването излезе в своя блог като журналист, който с шума около резултатите от научно лошото проучване искаше да насочи вниманието към оплакванията в хранителните изследвания и безкритичното разпространение на резултатите от медиите.
Съветите за здравословно хранене, които ни се предават чрез медиите чрез научни изследвания, са безброй и непрекъснато се променят. Понякога диетата с високо съдържание на мазнини е нездравословна, а понякога мазнините трябва да ви направят по-малко мазнини от въглехидратите. До преди няколко години диабетиците трябва да консумират само фруктоза вместо широко използваната захарна глюкоза. Сега обаче фруктозата изпада в лоша репутация, тъй като се казва, че все повече хора са алергични към добавената захар. След винения компонент ресвератрол, който отдавна се рекламира като истинско чудодейно лекарство срещу процесите на стареене, тъмният шоколад се появи като богата панацея.
Но много от изследванията, които изследват въздействието на храните върху здравето, са научно отвратителни. Въпреки това медиите ентусиазирано се нахвърлят върху резултатите им, без да ги разпитват. Журналистът Джон Боханън, който е доктор по биология в областта на бактериите, т.е. микробиологията, искаше да обърне внимание на този недостатък.
Той бързо пусна уебсайт, наречен Институт по диета и здраве в мрежата, който трябва да служи като справка за публикуването на специализирана статия. След това той набра няколко доброволци за мини-проучването на колегите си Питър Онекен и Диана Льобл, които искаха да заснемат филм за злоупотребите в хранителните изследвания. 16-те участници, петима мъже и единадесет жени, ги разделят на три групи: едната група е получавала диета с ниско съдържание на въглехидрати, втората група е спазвала същата диета, но също трябва да яде половин блокче горчив шоколад на ден. Третата група, от друга страна, която трябваше да служи като контрол, не получи никакви насоки относно диетата си. Краткото проучване продължи само 21 дни. За да направят това, изпитваните субекти трябваше да определят теглото си всяка сутрин. Накрая трябваше да попълнят въпросник и да подадат кръвна проба за лабораторни изследвания. Проучването вече беше в кутията и просто трябваше да бъде оценено. Дотук добре. С други думи, напълно нормално проучване, което е широко разпространено не само в хранителния сектор.
Авторите следват и общия стандарт при оценяването на данните: С редица участници от само 15 души (не е включен един човек), те оценяват 18 различни параметъра, като тегло, ниво на холестерол, сол, съдържание на протеини в кръвта, колко добре са били Тестваните са спали, общото им състояние и много други. Акцентът: Изследване, създадено по този начин, неизбежно води до фалшиво положителни резултати. С всеки отделен параметър, който се записва, вероятността за получаване на статистически „значим“ резултат за един от тях се увеличава. И резултатът винаги е статистически значим, ако вероятността резултатът да се получи случайно е под 5%. В технически жаргон това означава, че р-стойността е по-малка от 0,05. Със своите 18 параметъра авторите успяха да използват формулата:
P (вероятност за значим резултат) = 1 - (1 - p) n
очаквайте с 60% вероятност те да получат значителен резултат за поне един параметър. Така че картите бяха добри за нея. Кой фактор би бил това, първоначално беше напълно отворен. И накрая, оценката показа положителни резултати за шоколадояда при отслабване: те показаха 10% повече загуба на тегло. А въпросникът показа, че те спят по-добре от другите две групи. Оценката на кръвните проби също показа, че шоколадът осигурява по-добри нива на холестерол.
Авторите дължат тези ефекти, наред с други неща, на факта, че малките изследвания надценяват значението на отделните фактори. Например, теглото на жената може да варира с до 2,5 кг по време на менструалния си цикъл. Което е много повече от разликата, открита от авторите между шоколадоядите и групата, спазвала нисковъглехидратната диета. Следователно добре направеното проучване изисква голям брой участници в изследването, чийто състав трябва да бъде съпоставим: например по отношение на възрастта и пола или други фактори, свързани с резултата от изследването. Но на авторите не им пукаше. Честа практика в много проучвания за храненето. Това обаче не са умишлени измамнически маневри от екзекутиращите учени. Обикновено те не са наясно с тези източници на грешки. Не е необичайно да повторят изследване, което не отговаря на очакванията им, докато резултатите не са верни, тъй като предполагат, че са допуснали грешка.
Джон Боханън обобщи резултатите в публикация и ги изпрати до 20 различни специализирани списания, в които може да се публикуват статии срещу пари и които са известни със слабата си публикуваща практика. Списанията рекламират на своите уебсайтове, че статиите са рецензирани, както е в случая с известни специализирани списания, от научни колеги преди публикуването. Но само след 24 часа Джон Боханън получи одобрение от много различни специализирани списания. Партньорска проверка? Нищо! В крайна сметка авторите решават да публикуват своята статия в Международния архив на медицината. По-рано уважавано търговско списание, но наскоро продадено.
Сега екипът трябваше само да удари барабана, за да привлече вниманието на медиите към добрите новини, че уж шоколадът ви помага да отслабнете. Статията постигна пълен успех: безброй медии се втурнаха към уж новите знания. Едва ли някой от журналистите е задал ключови, критични въпроси относно точните подробности на изследването. И това, въпреки че проучването не предоставя никаква информация за броя на изпитваните.
А моралът на историята? Не се доверявайте на проучване на храненето, докато не разберете подробностите на проучването. Това не се отнася само за проучвания с малък брой участници. Дори мащабните изследвания могат да доведат до погрешни интерпретации, ако по същество се основават само на корелации. И това не рядко е така. Корелациите по никакъв начин не са подходящи за разкриване на причинно-следствени връзки, тъй като те могат да имат чисто случайно естество. Например, обширно шведско проучване наскоро установи, че хората, които пият мляко, ще умрат по-рано. Резултатите от такива изследвания са също толкова значими, колкото и опитът да се заключи, че яденето на сладолед причинява слънчево изгаряне от факта, че много слънчеви изгаряния се случват през лятото с висока консумация на сладолед. Дори броят на слънчевите изгаряния да се увеличи пропорционално с консумацията на сладолед.
Оригинална публикация:
Оттогава статията е изтеглена, но все още е достъпна чрез връзката по-долу:
Шоколад с високо съдържание на какао като ускорител за отслабване. Йоханес Боханън, Даяна Кох, Питър Хом, Александър Драйхаус. МЕЖДУНАРОДНИ АРХИВИ ПО МЕДИЦИНА, РАЗДЕЛ: ЕНДОКРИНОЛОГИЯ. 2015. Т. 8 No. 55. doi: 10.3823/1654. ISSN: 1755-7682