А что насчет куркумина, о котором мы говорили до того, как я попытался показать внутренний мир процесса исследования на примере этой специи? Да, есть доказательства, что куркумин, химические вещество в карри, обладает высокой биологической активностью при всех способах употребления и действует на весь организм (есть теоретические обоснования того, что он может быть и канцерогеном). Это достойная цель для исследований.
Но стоит сделать шаг назад и попытаться приложить к своему организму утверждение, что нужно есть больше карри, потому что «недавнее исследование» показало, что куркумин «прекрасно защищает от некоторых форм рака, в особенности от рака простаты». Усваивается только небольшой процент куркумина, употребляемого в пищу. Вам нужно съесть несколько граммов, чтобы получить достоверное повышение его содержания в крови, но чтобы съесть несколько граммов куркумина, нужно съесть примерно 100 граммов куркумы. Удачи! Чтобы перейти от исследования к рецепту, нужно думать гораздо больше, чем об этом говорят диетологи.
«Суть в том, чтобы дать всю информацию, которая нужна для оценки вашего вклада, а не только ту информацию, которая приведет к конкретному результату».
По результатам оценок, в мире уже опубликовано 15 миллионов медицинских статей, и 5000 журналов выходят каждый месяц. Большинство публикаций содержат противоречивые утверждения, и разобраться в том, где правда, очень сложно. Неизбежно люди будут сокращать материал. Мы полагаемся на обзорные статьи, на метаанализы, учебники, слухи или журналистские обзоры по теме.
Это в том случае, если вам нужно добраться до сути проблемы.
А если нужно просто проверить утверждение? Есть, например, несколько настолько странных мнений, что вам не удастся найти доктора наук, готового под ними подписаться; и есть в медицине несколько предположений, настолько нелепых, что вы не сможете подобрать какие-либо опубликованные экспериментальные данные, подтверждающие их, если только не будете притягивать их за уши и выбирать из обширной литературы исключительно то, что вам подходит.
Одно из крупнейших исследований по подбору фактов в академической литературе началось после статьи Лайнуса Полинга (Linus Pauling), прадедушки современной диетологии, и его основополагающей работы по приему витамина С при простуде. В1993 ГОДУ Пауль Книпшилд (Paul Knipschild), профессор эпидемиологии Университета Маастрихта, написал главу в солидный учебник «Систематические обзоры» (Systematic Reviews): он испытал значительные трудности, рассматривая публикации времен Полинга и подвергая их тому же самому строгому разбору, который вы найдете в современной литературе.
Он обнаружил, что Полинг специально выбрал те результаты исследований, которые доказывали преимущества витамина С. Если он ссылался на исследования, не подтверждающие его теорию, то называл их методологически некорректными. Правда, как показали реальные простуды, такими же оказались и статьи, которые он щедро цитировал для подтверждения своего мнения.
В защиту Полинга можно сказать, что он жил в то время, когда люди не знали лучшего выхода, и, возможно, не понимал, что делает. Сейчас тенденциозный подбор доказательств — одна из наиболее частых сомнительных практик в альтернативной медицине, в особенности в диетологии, где он фактически считается нормальным. В действительности «тенденциозный подбор фактов» — это то, что целители называют «альтернативной парадигмой». В классической медицине это тоже встречается, но есть большая разница: здесь это считается серьезной проблемой, и ведутся поиски ее решения.
Решением является «систематический обзор». Вместо того чтобы ходить вокруг да около в онлайне и выбирать самые подходящие статьи, чтобы подтвердить свои предположения и продать продукт, в систематическом обзоре у вас есть четкая стратегия поиска данных (честно описанная в вашей статье, включая даже ключевые слова, которые вы использовали при поиске в базах данных научных статей). Вы берете характеристики всех найденных исследований, дальше (в идеале вслепую по отношению к результатам) измеряете методологическое качество каждого (чтобы понять, насколько это «справедливый тест»), дальше сравниваете альтернативы и потом даете критичное, взвешенное заключение.