В научной литературе исследования с "хороший" результаты будут опубликованы с большей вероятностью, чем исследования с неясными или отрицательными результатами. Исследование с новым захватывающим открытием (положительным результатом), вероятно, увидит свет, даже если результаты не соответствуют гипотезе авторов. Но исследование, в котором нет нового открытия (отрицательный результат) или неясное, будет опубликовано с гораздо меньшей вероятностью.
Тот факт, что положительные результаты с большей вероятностью будут опубликованы, называется предвзятостью публикации, и, к сожалению, это довольно распространенное явление. Поскольку наука – это получение знаний, когда научная литература искажается в результате предвзятости публикации, это "знания" становится менее заслуживающим доверия.
В медицине это может иметь серьезные последствия. Пациентам может быть назначено лечение, основанное на предвзятых результатах, а врачи и политики могут не знать, что информация, на которой они основывают свои решения, имеет недостатки.
Например, мы знаем, что научная литература переоценивает эффективность антидепрессантов при лечении депрессии. Эти препараты также используются для лечения тревожных расстройств. Мы хотели выяснить, не была ли переоценена эффективность антидепрессантов при этих состояниях из-за предвзятости публикации.
Что вызывает предвзятость публикации?
Прежде чем мы рассмотрим наше исследование антидепрессантов и тревожности, давайте посмотрим, почему положительные результаты будут опубликованы с большей вероятностью, чем отрицательные или неясные.
Исследователи могут страдать от "Когнитивное искажение," что означает, что они с большей вероятностью будут интерпретировать результаты в соответствии со своими собственными гипотезами. Короче говоря, люди могут найти то, что они ожидают (или хотят) найти.
Или что, если вы что-то найдете, но это не кажется таким значительным? Когнитивная предвзятость может побудить исследователей взглянуть на другие, иногда менее значимые, результаты своих исследований, когда они не найдут то, что ожидали. Или они могут анализировать свои данные с помощью нового статистического метода или объединять различные результаты в новую конечную точку, которая позволяет им прийти к результату, который согласуется с их гипотезой.
Исследователи могут принять решение не публиковать отрицательные результаты. Это происходит по множеству причин, но деньги, как правило, большие. Finding "ничего такого" просто с меньшей вероятностью приведет к финансированию последующих исследований, чем обнаружение "что-то." Это не единственная финансовая причина, по которой отрицательные результаты могут не публиковаться. Лечение по рецепту и без рецепта – большие деньги во всем мире, и отрицательные результаты не помогают продавать лекарства.
И иногда это не в руках исследователей. Испытания с отрицательными результатами с меньшей вероятностью будут приняты для публикации в крупных журналах. Журнал отправляет представленные рукописи на рецензирование. Специалисты в данной области проверяют работу и сообщают о том, следует ли ее принимать к публикации или нет.
Рецензирование позволяет сторонним рецензентам высказать собственное мнение и идеи относительно исследования. В конечном итоге решение принять или отклонить рукопись может зависеть от этих изменений.
В этой ситуации положительные результаты, как правило, оцениваются более благоприятно, поскольку они часто лучше соответствуют мнению рецензента. Положительные результаты также привлекают более широкое внимание, чем отрицательные результаты, что может повысить узнаваемость и репутацию журнала.
Публикационная предвзятость и антидепрессанты при тревоге
В других исследованиях были обнаружены случаи предвзятости публикации в исследованиях, посвященных изучению эффективности антидепрессантов при лечении депрессивного расстройства, а также использования антипсихотических средств.
Мы хотели выяснить, присутствует ли предвзятость публикаций в исследованиях эффективности антидепрессантов второго поколения для лечения тревожных расстройств. Эти препараты, селективные ингибиторы обратного захвата серотонина (СИОЗС) и ингибиторы обратного захвата серотонина и норэпинефрина (СИОЗСН), являются основным препаратом выбора для лечения тревожности. Возможно, вы видели рекламу этих препаратов – например, Цимбалта и Эффексор – это СИОЗС, а Золофт и Прозак – это СИОЗС.
Мы рассмотрели испытания, в которых изучались СИОЗС и СИОЗСН в лечении генерализованного тревожного расстройства, панического расстройства, социального тревожного расстройства, посттравматического стрессового расстройства и обсессивно-компульсивного расстройства.
Мы сравнили испытания, представленные фармацевтическими компаниями в Управление по санитарному надзору за качеством пищевых продуктов и медикаментов (FDA), с опубликованными в научных журналах. Мы хотели узнать, сколько испытаний было опубликовано в статьях и точно ли в этих опубликованных статьях отражены результаты испытаний.
Из 57 испытаний, зарегистрированных FDA, 41 дали положительные результаты, а 16 – нет. В нашем исследовании, опубликованном в JAMA Psychiatry, мы обнаружили, что из 45 журнальных статей, в которых сообщалось об этих испытаниях, 43 были положительными. Это означает, что 96% журнальных статей были положительными по сравнению с 72% обзоров FDA.
При дальнейшем исследовании мы обнаружили, что испытания с "не положительные результаты" (результаты, которые были отрицательными или неясными) были опубликованы с меньшей вероятностью, чем испытания с положительными результатами. Из 41 положительного испытания, зарегистрированного FDA, 40 были опубликованы в журнальных статьях. Но из 16 испытаний с отрицательными результатами только девять были опубликованы.
Превращение отрицательных результатов в положительные
Из девяти опубликованных испытаний с отрицательными результатами три были опубликованы с положительными результатами в прилагаемой журнальной статье. Это называется предвзятостью при представлении результатов. Эти исследования обычно сообщали о результатах для вторичного, менее важного результата или использовали творческие статистические подходы, чтобы первичный результат казался положительным, когда истинный результат был отрицательным или неясным.
И еще для трех неположительных результатов испытаний было сообщено точно, но авторы пришли к выводу, что результаты были действительно положительными – это называется вращением. Только три из девяти отрицательных испытаний были опубликованы без какой-либо предвзятости.
Завышение лечебных эффектов
Когда мы сравнивали результаты исследований, отрецензированных FDA, и опубликованной литературы, в литературе было завышено влияние препаратов на 15%, что не является статистически значимым.
В этом случае мы обнаружили, что предвзятость публикации больше способствовала избытку положительных результатов, чем оценкам того, насколько хорошо эти препараты действительно действовали.
Избыток положительных испытаний создает искаженное представление об эффективности этих препаратов при тревожных расстройствах. А это, в свою очередь, может создать нереалистичные ожидания относительно того, насколько хорошо эти препараты действуют среди лиц, назначающих лекарства, и пациентов.
Открытость о результатах исследования
Предвзятость публикации не ограничивается психиатрией – это проблема медицины. Поскольку так много медицинских исследований финансируется государством, исследователи и общественность должны иметь легкий доступ к надежным результатам исследований, на которых основаны современные методы лечения. К сожалению, нынешняя система в значительной степени полагается на добровольную отчетность, что способствует предвзятости публикации.
Теперь, когда научное сообщество уделяет больше внимания предвзятости публикации и создаваемым ею проблемам, начались различные инициативы, включая регистрацию испытаний, журналы, которые открыто приветствуют исследования с отрицательными результатами, и инициативы открытого доступа, в которых данные становятся общедоступными независимо от результата изучение.
Мы надеемся, что эти инициативы в сочетании с повышением осведомленности исследователей, участников исследования и государственных органов помогут повысить точность и полноту отчетности о результатах клинических исследований.