На полях невозможного

Перемещайтесь через поток информации об ожирении.

De Agostini Picture Library/G. Dagli Orti/Bridgeman Images, used with permission

Тулуз-Лотрек, «Акробат на канате», 19 век, Франция. Метафора для исследования «границы невозможного».

Источник: Библиотека изображений Де Агостини / G. Dagli Orti / Bridgeman Images, используется с разрешения

Гарри, лорд Мончензей, только что вернулся в дом своей семьи после восьмилетнего отсутствия, чтобы отпраздновать день рождения своей пожилой матери в «Воссоединении семьи», пьесе Т.С. Элиота 1939 года в стихах. Увы, он поворачивается к безумию из-за своей собственной вины: во время морского путешествия за год до этого жена Гарри «сметена с палубы посреди шторма» и исчезает среди волн. «Вы бы никогда не предположили, что кто-то может так быстро утонуть», – говорит Гарри. Он мучает себя, что, возможно, оттолкнул ее в море и был ответственен за ее смерть, «… желание избавиться от нее / заставляет его верить, что он сделал…» Его родственники, не в силах помочь и обеспокоенные беспокойным умом Гарри рассмотрите возможность пригласить своего местного врача на консультацию. Тетя Гарри Агата, скептически настроенная, говорит: «Не ради блага, что это будет делать / Но это ничего не оставит невыполненным / На грани невозможного».

Именно Арчибальд Л. Кокрейн, сторонник использования рандомизированных контролируемых испытаний и для которого была названа база данных Кокрановской библиотеки, обратил внимание на цитату Элиота. В своей статье « Эффективность и эффективность: случайные размышления о службах здравоохранения» (1971 г.) Кокрейн, в целом говоря о научных исследованиях в целом, призвал клиницистов «… отказаться от« предела невозможного »…» (стр. 85).

Photo copyright Christie's Images/Bridgeman Images, Copyright 2018, Artists Rights Society (ARS), NYC, ADAGP. Used with permission of ARS and Bridgeman Images.

«Узел в волосах» Жана Дюбуффе («Невозможное»)

Источник: авторское право на фотографию Christie’s Images / Bridgeman Images, авторское право 2018, Общество прав художников (ARS), Нью-Йорк, ADAGP. Используется с разрешения ARS и Bridgeman Images.

Изучение ожирения граничит с этой «границей невозможного», потому что: «Несмотря на десятилетия исследований причин пандемии ожирения, мы, похоже, сейчас не ближе к решению проблемы, чем когда впервые подняли вес тела десятилетия назад . »(Hebert et al., Mayo Clinical Proceedings , 2013).« Круг нашего понимания / очень ограниченная область », – говорит хор ближе к концу пьесы Элиота. Как же мы можем понять, где мы сейчас находимся?

Еще в середине 1950-х годов исследователь Джонса Хопкинса, изучая простоту абстрагирования информации из своих биологических журналов, писал: «Возможно, ни одна проблема, стоящая сегодня перед отдельным ученым, не является более разрушительной, чем попытка справиться с потоком опубликованных научных исследований, даже в пределах своей узкой специальности ». (Glass, Science, 1955) Инструменты были примитивными и простыми по стандартам 21-го века: сегодня у нас есть возможности поиска далеко за пределы того, что ученые могли себе представить, но« усилия, чтобы справиться с потоком научные исследования, даже в пределах своей узкой специальности »экспоненциально ухудшались. С одной стороны, как я написал восемь лет назад в своем первом блоге, более 250 различных профессиональных журналов, даже не включая, например, журналы в области экономики или потребительских вопросов, содержат статьи, касающиеся ожирения. (Baier и др., Международный журнал по ожирению, 2010 г.) Мы рискуем быть затопленными и, как жена Гарри, потерянными в море или, скорее, «потерянными при публикации». (Garg et al., Kidney International, 2006) из общих вопросов, связанных с перемещением этого потока информации?

«Был старик из Кобленца», литография, 1846 г., англ.

Источник: из «Книги чепухи», изданной Фредериком Уорном и Ко, созданной Эдвардом Лир / Авторские права Look and Learn / Bridgeman Images / использованной с разрешения.

Например, «Не вся научная информация создана равной» (Ioannidis, PLOS Medicine 2018). Например, в своем обзоре текущего «беспорядка дезинформации в медицине» Ioannidis и его коллеги ( Европейский журнал клинических исследований , 2017) обнаружили, что около 17 миллионов статей в поисковой системе PubMed, в которой участвуют люди, и, по-видимому, около 1 миллиона статей добавляются каждый год. Это не особенно хорошая новость, так как большая часть информации, содержащейся в этих статьях, вводит в заблуждение, ненадежна или имеет «неопределенную достоверность». Кроме того, говорят Иоаннидис и др. (2017), большинство из тех, кто читает эти исследования, даже не подозревают этой ситуации, и даже если они есть, большинство из них не имеют достаточной квалификации, необходимой для оценки исследований, которые они читают.

Ioannidis ( Европейский журнал эпидемиологии, 2018) также обратил внимание на так называемый эффект Мэтью : те статьи, которые часто цитируются, продолжают цитироваться. Мертон ( Science , 1968) описал этот эффект, названный по имени Библейской книги Матфея (25,9): «Каждому, у кого больше будет дано, и у него будет изобилие; но от того, кто этого не сделал, даже то, что у него есть, будет отнято ». Другими словами, объясняет Мертон, ученые с« значительной репутацией »продолжают получать большее признание, в то время как тем,« кто еще не сделал свой след », отказывают в этом признании. их.

Copyright Look and Learn/Bridgeman Images, used with permission.

«Так близко и еще так далеко», литография, Английская школа, открытка 20-го века. Исследование ожирения может быть как точным, так и неточным.

Источник: Copyright Look and Learn / Bridgeman Images, используется с разрешения.

Средства массовой информации способствуют возникновению этой проблемы, часто заполняя общественность медицинской информацией, иногда от тех популярных «авторитетов» на телевидении, которые предоставляют «доказательства», большая часть которых «неполна и крайне неточна» (Ioannidis et al, 2017). Поскольку наука, в конце концов, является общедоступной, ее необходимо донести до других: «это то, что мы подразумеваем под вкладом в науку – то, что дается в общий фонд знаний. В конце концов, наука – это общедоступная и социально подтвержденная совокупность знаний ». (Мертон, 1968 г.) И« это лучший метод, которым мы располагаем, чтобы прийти к беспристрастному познанию мира ». (Kroeger et al, American Journal of Clinical Nutrition , 2018) Средства массовой информации и даже сами исследователи, хотя якобы для благонамеренных, даже праведных целей, иногда искажают или преувеличивают, сознательно или неосознанно, научные утверждения, т. Е. То, что Коуп и Эллисон метко назвали белой шляпой уклон ( Acta Paediatrica , 2010; Международный журнал ожирения , 2010) (Более подробную информацию о предвзятости белой шляпы см. В моем блоге 53). В результате, врачи, пациенты и их семьи часто остаются без возможности оценить варианты лечения.

Одним из основных препятствий в литературе было постоянное понимание ожирения как отдельного заболевания с единой этиологией. (Hebert et al, 2013; SR Карасу, Американский журнал медицины образа жизни, 2013), хотя Stunkard и Wolff еще в 1950-х годах ( Psychosomatic Medicine , 1958) отметили, что нет необходимости предполагать общую этиологию. Кроме того, вместо того, чтобы оценить огромные сложности ожирения, многие исследователи классифицируют ожирение на языке своей дисциплины. Например, врачи рассматривают ожирение как патологическое состояние, то есть заболевание, подлежащее лечению; социологи могут рассматривать это как пример разнообразия тела; духовенство как пример морального разложения и потворства своим желаниям; антропологи, как болезнь цивилизации; генетики, как генетическое заболевание; эволюционные биологи, как подходящая или неуместная адаптация к ожирению, с участием бактерий, вирусов, эндокринно-разрушающих токсинов, среди прочих; физики, как энергетический дисбаланс по законам термодинамики; и психиатры и психологи, как расстройство саморегуляции или даже зависимость. (С.Р. Карасу, 2013 г .; С.Р. Карасу, Американский журнал медицины образа жизни , 2014 г.). (Подробнее о различных «языках» см. Мой блог 26 «Возвышающийся Вавилон» .)

Есть также методологические трудности, некоторые общие для науки, а некоторые специфические для исследований ожирения. Особенно распространенным в исследованиях ожирения является то, что нерандомизированные обсервационные исследования намного превосходят рандомизированные контролируемые исследования, и существует небрежное использование причинного языка, особенно из этих обсервационных исследований. (Трепановский и Иоаннидис, « Достижения в области питания», 2018 г.)

Статистические ошибки необычно распространены среди исследований ожирения. «Если вы будете пытать свои данные достаточно, они скажут вам все, что вы хотите услышать», и «как и другие формы пыток, они не оставляют никаких уличающих следов при умелом выполнении… и может оказаться трудным доказать даже при наличии уличающих доказательств». (Mills, NEJM, 1993) Аллисон и его коллеги (George et al, Obesity, 2016) определили 10 наиболее распространенных статистических ошибок, наблюдаемых в исследованиях ожирения. Одна из наиболее распространенных ошибок в литературе по ожирению заключается в том, что вмешательство является эффективным, если само исследование не подтверждает этот вывод. (Браун и др., Труды Национальной академии наук , 2018 г.) Некоторые другие распространенные ошибки включают в себя неправильное обращение или даже игнорирование пропущенных данных или неправильное обращение с теми субъектами, которые не завершают исследование, игнорируя систематическую ошибку подтверждения и игнорируя регрессию в среднем. Уклон подтверждения – это тенденция исследователей оценивать свои результаты по-разному или даже несколько менее критично, когда их результаты соответствуют их первоначальным ожиданиям или соответствуют их первоначальным гипотезам. Регрессия к среднему значению является статистическим явлением, которое происходит, когда повторные измерения выполняются для одного и того же субъекта, и нет контрольной группы для сравнения какой-либо разницы с исходным уровнем. Когда измерения меняются при повторном обследовании (и часто, когда субъекты отклоняются менее значительно от среднего значения), исследователи могут ошибочно предположить, что изменение произошло из-за их вмешательства. Другими словами, регрессия к среднему может «маскироваться под эффект лечения» (Kahathuduwa et al., Диабет, Ожирение и Метаболизм , 2018)

 Bridgeman Images, used with permission.

Взвешивание баров камфоры, 15 век, итальянский. Данные, полученные из самоотчетов, так же неточны и примитивны, как и 15 в. измерение

Источник: Bridgeman Images, используется с разрешения.

Кроме того, исследования ожирения страдают от сложностей неточных измерений, в том числе связанных с самооценкой веса, роста, потребления пищи и физических упражнений. «В то время как один страдает ожирением или нет, разрыв между двумя состояниями является произвольным». Другими словами, здоровье населения «проявляется как непрерывный процесс… (и)« Мы можем прогнозировать здоровье в группах населения с гораздо большей уверенностью, чем можем предсказывать здоровье у отдельных людей ». (Galea, The Milbank Quarterly , 2018)« Мы называем это здоровьем, когда не видим симптомов / болезни. Здоровье – это относительный термин », – говорит врач в пьесе Элиота.

Эти неточности измерений привели к тому, что некоторые исследователи назвали «лженаукой». (Trepanowski and Ioannidis, 2018; Archer et al., Current Problem in Cardiology , 2016; Archer et al., PLOS One, 2013) Например, попытки наблюдения за питанием, т.е. систематический сбор данных для выявления тенденций в потреблении и оценки связи между потреблением калорий и показателями ожирения за последние 40 лет привел к «псевдоколичественным» данным, которые являются «физиологически неправдоподобными». Данные, собранные центрами для Борьба с болезнями гражданского населения НАНЕС, не институционализированного в США, опиралась на неточные и крайне вводящие в заблуждение самоотчеты о потреблении пищи, которые также исключали огромные полосы населения США, включая незарегистрированных иностранцев, бездомных и тех, кто находился в учреждениях. Шоеллер и др. В письме, подписанном 17 лидерами в области исследований ожирения, задокументировали, как прошло более 20 лет с тех пор, как сам Шоллер обнаружил «существенные искажения и неточности», то есть «фатальные недостатки» – особенно грубое недооценка потребления калорий в исследовании ожирения. Невероятно, но практика самоотчетов по-прежнему широко распространена в исследованиях ожирения. (Schoeller и др., Американский журнал клинического питания , 2013 г .; Dhurandhar и др., Журнал питания , 2016 г.)

Copyright Christie's Images/Bridgeman Images/Copyright 2018 Artists Rights Society (ARS), NY, used with permission of both ARS and Bridgeman Images.

Пол Кли, «Канатоходец», 1923, литография.

Источник: Copyright Christie’s Images / Bridgeman Images / Copyright 2018 Artists Rights Society (ARS), Нью-Йорк, используется с разрешения ARS и Bridgeman Images.

Доверие к науке о питании еще больше уменьшается, когда одно исследование указывает на то, что питательное вещество вредно, а затем другое маркирует то же питательное вещество как полезное. Иоаннидис назвал это чрезвычайное чередование феноменом Протея в честь греческого бога, который мог легко изменить свою форму. ( PLoS Medicine , 2005) Кроме того, исследование ожирения сопряжено с трудностями, поскольку почти все переменные в питании коррелируют друг с другом (Ioannidis, JAMA 2018): мы не только едим наши углеводы, жиры и белки в различных сочетаниях, но и наша пища подвергает нас опасности. к тысячам химических веществ, загрязняющих веществ и токсинов, которые делают невозможным отделить потенциальное влияние одного компонента от других, а также изолируют воздействие на окружающую среду и другие переменные, такие как образ жизни, образование, социально-экономический статус и т. д. Кроме того, соблюдение режима питания протокол часто плохой или контрольная группа может принять экспериментальный протокол. (Трепановский и Иоаннидис, 2018)

Общественность должна быть скептически настроена, пишет Марион Нестле, в своей книге « Неприятная правда: как пищевые компании искажают науку о том, что мы едим» (2018), когда в любом исследовании выделяются продукты питания, напитки, добавки или конкретные ингредиенты, которые вызывают или уменьшают риск ожирение, болезни сердца, диабет 2 типа или рак. (стр. 228) Nestle называет сенсационные выводы о пользе отдельных продуктов питания, когда они исключаются из своего «диетического контекста», нутриффффом. (стр. 54) Поскольку мы едим все продукты в сочетании с другими, нет смысла признавать, что один продукт имеет необычные и особые преимущества для нашего здоровья.

В особенно инновационном исследовании Schoenfeld и Ioannidis ( Американский журнал клинического питания , 2013) подняли провокационный вопрос, связано ли все, что мы едим, с раком. Эти исследователи отобрали 50 обычных ингредиентов из случайных страниц в популярной кулинарной книге и обнаружили, что 40 из этих ингредиентов (80 процентов) были включены в статьи, в которых приводятся доказательства увеличения или уменьшения риска заболевания раком, несмотря на слабые статистические данные. Рак желудочно-кишечного тракта, отмеченный в 45% исследований, был наиболее изученным. Кроме того, в рандомизированных контролируемых исследованиях часто не удавалось найти эффекты лечения питательными веществами, в которых обсервационные исследования ранее сообщали о сильных связях, и даже метаанализ иногда оказывался предвзятым и подвергался неправильной интерпретации. (Schoenfeld and Ioannidis, 2013) «Если понимать буквально, если мы увеличим или уменьшим потребление любого из нескольких питательных веществ на две порции в день, рак почти исчезнет во всем мире». (Brown et al., Advances in Nutrition , 2014)

Независимо от того, что является основным направлением, исследования в области питания были названы «среди наиболее спорных областей науки» (Ioannidis and Trepanowski, JAMA , 2018) из-за потенциальных финансовых конфликтов интересов со стороны промышленности или других источников финансирования, а также из-за собственных исследователей. потенциальные пристрастия и предпочтения (например, веганский, безглютеновые и т. д.) в том, что они едят или какие причины они поддерживают. (Brown et al, 2014) Многие исследователи полагают, что «пуританский и устаревший взгляд» на то, что получение финансирования от промышленности неизбежно искажает результаты. (Ioannidis, 2018) Фактически, Аллисон и др. Обнаружили, просматривая ведущие медицинские журналы, что рандомизированные контролируемые испытания были одинакового качества независимо от источника финансирования. (Кайзер и др., Международный журнал ожирения, 2012)

Нестле, тем не менее, предлагает предостережение: «Позвольте мне официально заявить, что финансовые связи с пищевыми компаниями не обязательно портят; вполне возможно проводить финансируемые отраслью исследования и сохранять независимость и целостность. Но финансирование продовольственной компании часто оказывает неоправданное влияние ». (Нестле, 2018 г., стр. 6) Она добавляет:« (и)… это говорит о том, что вопрос исследования и интерпретация требуют большего, чем обычный уровень контроля ». 71) Для Nestle должно быть четкое различие между маркетингом со стороны пищевых компаний и наукой. Кроме того, Nestle считает, что финансовые конфликты интересов категорически отличаются от нефинансовых конфликтов, которые могут зависеть от индивидуальных убеждений, желаний и гипотез, которые сильно различаются у разных исследователей.

The Stapleton Collection/Bridgeman Images, used with permission.

Ноев Ковчег из Нюрнбергской Библии, немецкий язык, 15 в. Исследователи создают «ковчег данных»

Источник: Stapleton Collection / Bridgeman Images, используется с разрешения.

Хотя они явно не относятся к тем, кто проводит исследования по питанию, исследователи не обязаны быть прозрачными при публикации своих необработанных данных, в результате чего многие исследования невозможно воспроизвести. Нестле (2018, стр. 169) вспоминает шутку из лет назад, когда она была аспирантом по молекулярной биологии в Беркли: «Никогда не повторяйте эксперимент, который работает с первой попытки». В попытке исправить ситуацию, сохранить и сделать Получив доступ к этим ретроспективным данным, Хардвик и Иоаннидис ( PLOS One , 2018) выступили с инициативой – Data Ark – онлайн-хранилище для хранения необработанных данных, поощрения научной строгости и повышения прозрачности исследований.

Hirmer Fotoarchiv/Bridgeman Images, used with permission.

«Плавающий ковчег», французы, 11 век. Наш «ковчег данных» сегодня сохранит необработанные данные.

Источник: Hirmer Fotoarchiv / Bridgeman Images, используется с разрешения.

Нижняя линия

Подобно тому, как жена Гарри в пьесе Т.С. Элиота захлестывает за борт и тонет, мы все тонем в загрязненном море публикаций. Большая часть исследований в области ожирения дает псевдонаучные данные из-за плохой методологии, ошибочных и ненадежных измерений и предвзятости из-за конфликта интересов. Янинидис предположил, что само исследование нуждается в собственном исследовании, которое он и его коллеги назвали метаисследованием как способ проверки, оценки и вознаграждения исследований. ( PLOS Biology, 2018) В науке иногда существует тонкая грань между здоровым скептицизмом и искажением и преувеличением научной неопределенности. (Allison et al., American Scientist, 2018). Хотя «круг нашего понимания» часто кажется «очень ограниченной областью», у исследователей нет иного выбора, кроме как ориентироваться как можно лучше в потоке информации и вдали от этой «границы». невозможного.