Какво НЕ означава едно клинично проучване

Най-лесният начин да преувеличиш науката е да кажеш повече, отколкото самото изследване показва.

Едно клинично проучване може да бъде отлично проведено. Може да има статистически значим резултат. Може да бъде публикувано в сериозно научно списание.

И въпреки това да не доказва това, което някой твърди в рекламата.

В науката ограниченията не са слабост. Те са границата между това, което знаем, и това, което само предполагаме.

Затова до всеки важен резултат според нас трябва да стои още един въпрос:

Какво НЕ означава това?

1. ПОЛОЖИТЕЛЕН РЕЗУЛТАТ НЕ ОЗНАЧАВА, ЧЕ ВСЕКИ ЩЕ ПОЛУЧИ СЪЩИЯ ЕФЕКТ

Клиничните проучвания сравняват групи. Резултатите често се представят като средни стойности.

Но хората не са средни стойности.

В една и съща група може да има хора с много силен отговор, хора с умерен отговор и хора без осезаема промяна.

Затова средният резултат на групата не може да бъде превърнат в „Това ще се случи и при теб.“

Средното подобрение не е индивидуална гаранция.

2. ПРОУЧВАНЕ НА ЕДНА ФОРМА НЕ ДОКАЗВА ВСИЧКИ ФОРМИ

Това е особено важно при хранителните добавки.

Да вземем растителен екстракт. Може да имаме обикновен прах от растението, воден екстракт, алкохолен екстракт, стандартизиран екстракт, екстракт от корен, екстракт от лист или патентована суровина със специфична технология.

На етикета всички могат да изглеждат като „същата съставка“. Но клинично не са непременно едно и също.

Ако едно проучване е направено с конкретна стандартизирана форма, резултатът принадлежи първо на тази форма. Не на цялата категория.

Същото важи за магнезиевите соли, витаминните форми, мастните киселини, аминокиселините и растителните екстракти.

Името на съставката е начало. Не доказателство.

3. ПРОУЧВАНА ДОЗА НЕ ДОКАЗВА СИМВОЛИЧНА ДОЗА

Това е един от най-честите проблеми в supplement marketing-а.

Да кажем, че резултат е наблюдаван при 600 mg дневно. След това продукт съдържа 60 mg. И до него стои същото клинично проучване.

Съставката може да е едната и съща. Но интервенцията не е.

Разлика от 10 пъти в дозата не е малък детайл.

Затова когато виждаш „Подкрепено от клинични проучвания“, питай:

В каква доза? И тази доза присъства ли в продукта?

4. ИЗСЛЕДВАНА СЪСТАВКА НЕ ДОКАЗВА АВТОМАТИЧНО ЦЯЛАТА ФОРМУЛА

Това разграничение е фундаментално.

Представи си формула с четири активни съставки. За всяка от тях има човешки клинични проучвания.

Това означава, че можем да говорим за научната база зад отделните съставки.

Но ако точната комбинация не е била изследвана като готов продукт, не можем да кажем „Цялата формула е клинично доказана.“

Това би било по-голямо твърдение от наличните данни.

В CELLMODE искаме тази граница да бъде ясна.

Human evidence за съставките не е автоматично clinical proof за крайния продукт.

5. РЕЗУЛТАТ ПРИ КОНКРЕТНО ЗАБОЛЯВАНЕ НЕ Е ОБЕЩАНИЕ КЪМ ЗДРАВ ЧОВЕК

Голяма част от хранителните и нутритивните изследвания се провеждат при хора с конкретни здравословни състояния.

Това може да бъде диабет, дислипидемия, безсъние, хипертония, сърдечно-съсъдово заболяване или метаболитен синдром.

Тези проучвания могат да бъдат много важни научно. Но контекстът не трябва да изчезва.

Ако участниците са имали конкретно заболяване, този резултат не трябва автоматично да се превръща в обещание към здрав потребител.

И обратното. Резултат при здрави млади хора не може автоматично да бъде прехвърлен към клинична популация.

Популацията е част от доказателството.

6. ПРОМЯНА В BIOMARKER НЕ ОЗНАЧАВА АВТОМАТИЧНО КЛИНИЧЕН РЕЗУЛТАТ

Лабораторните показатели са полезни. Понякога са изключително важни.

Но не всеки biomarker е равен на реален здравен резултат.

Едно проучване може да покаже промяна в ензим, хормон, липиден показател, възпалителен маркер или кръвна концентрация.

Това не означава автоматично по-добро усещане, по-добро физическо функциониране, по-нисък риск от заболяване или по-дълъг живот.

Понякога връзката е силна и добре установена. Понякога не е.

Затова трябва да различаваме surrogate marker от clinical outcome.

7. „СТАТИСТИЧЕСКИ ЗНАЧИМО“ НЕ ОЗНАЧАВА „ГОЛЯМ ЕФЕКТ“

Това е една от най-често неразбраните идеи.

Статистическата значимост ни казва нещо за вероятността наблюдаваният резултат да е съвместим със случайна вариация при конкретен статистически модел.

Но тя не казва сама по себе си колко голяма е промяната, колко важна е или дали човек реално ще я усети.

Много малка промяна може да бъде статистически значима при голям брой участници.

Затова при добър анализ гледаме и размер на ефекта, доверителни интервали и практическо значение.

8. ЕДНО ПРОУЧВАНЕ НЕ ОЗНАЧАВА НАУЧЕН КОНСЕНСУС

Едно силно RCT е ценно. Но не е цялата наука.

Истинската увереност идва, когато виждаме повторяемост, сходни резултати, различни популации, независими изследователски екипи, систематични прегледи и мета-анализи.

Ако едно проучване намира голям ефект, а следващите пет не успяват да го повторят, картината се променя.

Науката не е screenshot на една публикация.

Тя е натрупване на доказателства.

9. „МЕХАНИЗМЪТ ИМА СМИСЪЛ“ НЕ ОЗНАЧАВА „РАБОТИ ПРИ ХОРА“

Това е класическият скок.

Показва се биохимичен pathway, ензим, рецептор, митохондрия или молекулярен механизъм. След това идва заключението „Следователно това ще се случи и при човек.“

Не непременно.

In-vitro и animal models могат да бъдат много полезни. Те ни показват как би могла да работи една съставка.

Но човешкият организъм е много по-сложен.

Механизмът е начало. Данните при хора са проверката.

10. „НЯМА СТАТИСТИЧЕСКИ ЗНАЧИМ ЕФЕКТ“ НЕ ВИНАГИ ОЗНАЧАВА „НЯМА НИКАКЪВ ЕФЕКТ“

И обратната грешка съществува.

Ако едно проучване не намира статистически значима разлика, това не означава автоматично, че интервенцията няма абсолютно никакъв ефект.

Възможно е извадката да е твърде малка, продължителността да е твърде кратка, дозата да е неподходяща, измервателният инструмент да е нечувствителен или вариабилността да е голяма.

Това не означава, че трябва да игнорираме отрицателните проучвания.

Точно обратното. Те трябва да се четат също толкова внимателно, колкото положителните.

11. META-ANALYSIS НЕ ОЗНАЧАВА АВТОМАТИЧНО „ОКОНЧАТЕЛНА ИСТИНА“

Мета-анализът често стои най-горе в популярните „пирамиди на доказателствата“. И с причина.

Той може да комбинира данни от множество проучвания и да даде по-прецизна обща оценка.

Но има фундаментален проблем:

Качеството на мета-анализа зависи от качеството и сходството на изследванията вътре в него.

Ако комбинираме различни дози, различни форми, различни популации, различни endpoints или слаби и пристрастни проучвания, крайният резултат трябва да се интерпретира внимателно.

Мета-анализът не е магическа машина, която превръща слабите данни в силни.

12. STUDY COUNTRY НЕ Е ДРЕБЕН ДЕТАЙЛ

Мястото, където е проведено едно проучване, понякога има значение.

Различните популации могат да се различават по хранене, генетика, дефицити, начин на живот, здравна система и изходен риск.

Това не означава, че резултат от Индия например няма значение за България.

Означава, че контекстът трябва да бъде видим.

Затова в CELLMODE Evidence Format ще показваме и държавата. Не като decoration. Като част от контекста.

13. ФИНАНСИРАНО ОТ ИНДУСТРИЯТА НЕ ОЗНАЧАВА АВТОМАТИЧНО „ФАЛШИВО“

Това също често се опростява прекалено.

При специфични съставки е напълно нормално производителят да финансира част от клиничните изследвания.

Фактът, че има индустриално финансиране, не отменя автоматично резултата.

Но трябва да го знаем.

Гледаме финансирането, conflict of interest, ролята на спонсора, дизайна, анализа и повторяемостта от независими екипи.

Контекст, не автоматична присъда.

14. PUBMED НЕ Е ПЕЧАТ ЗА „РАБОТИ“

Това е много важно.

PubMed е база данни за научна литература.

Фактът, че дадена публикация е индексирана там, не означава, че резултатът е голям, че дизайнът е перфектен, че няма ограничения, че твърдението на рекламата е вярно или че продуктът е клинично доказан.

PubMed ти казва:

„Това е научна публикация.“

Не:

„Това твърдение е вярно.“

CELLMODE EVIDENCE FORMAT: ДОБАВЯМЕ „КАКВО НЕ ОЗНАЧАВА“

Когато разглеждаме конкретно human study, искаме да показваме:

Например:

Какво означава: В тази конкретна популация и при тази конкретна интервенция е наблюдавана статистически значима разлика спрямо placebo.

Какво НЕ означава: Не доказва, че всеки човек ще получи същия резултат, че всяка форма на съставката е равностойна или че всеки продукт, който я съдържа, е клинично доказан.

Това е малка секция. Но според нас е една от най-важните.

ЗАЩО ДА ПОКАЗВАМЕ ОГРАНИЧЕНИЯТА?

Защото другият вариант е много лесен.

Взимаш най-впечатляващото число от abstract-а. Премахваш популацията. Премахваш дозата. Премахваш продължителността. Премахваш ограниченията.

И получаваш перфектна реклама.

Но вече не представяш науката. Представяш селекция от науката.

Ние искаме друго.

Да покажем резултата. И границите му.

КОГАТО НАУКАТА КАЗВА „НЕ ЗНАЕМ“

Понякога най-точният отговор е:

Не знаем достатъчно.

Това не е провал. Не е слабост. И не означава непременно, че дадена съставка „не работи“.

Означава, че наличните данни не позволяват по-силен извод.

За нас това е напълно приемлив отговор.

Защото доверието не се изгражда от това винаги да имаш впечатляващ резултат.

Изгражда се от това да не измисляш резултат, когато го няма.

ФИНАЛНО

Следващия път, когато видиш „Клинично доказано“, не питай само „Има ли проучване?“

Питай:

Какво е изследвано?

При кого?

В каква форма?

В каква доза?

Колко дълго?

Какво точно е измерено?

Колко голям е ефектът?

И най-вече:

Какво НЕ означава това проучване?

Точно там най-често се вижда разликата между научно доказателство и маркетингово преувеличение.

Разгледай всички клетъчни протоколи ->

Свързани статии: как да четеш клинично проучване.

Съдържанието е с информационна цел и не представлява медицински съвет. Хранителните добавки не са лекарствени продукти и не са предназначени за диагностика, лечение или профилактика на заболявания.

Назад към блога