Научная «колбаса» и осьминоги-инопланетяне

6th Conference on Research Integrity

На VI Всемирной конференции по недобросовестным исследованиям (World Conference on Research Integrity), которая недавно прошла в Гонконге, собрались люди, неравнодушные к проблемам в науке: накручиванию цитирования, сокрытию неудобных результатов, подделке данных. На конференцию приехало около 700 участников из более чем 60 стран. Представители из России выступали с четырьмя докладами: о плагиате в текстах диссертаций («Диссернет»), о самооправдании отечественных ученых, согрешивших нарушениями, об экспертизе Российского научного фонда (РНФ) и о релиз-активных препаратах — скрытой гомеопатии, статьи о которой по недоразумению проникли в качественные международные журналы.

Прыжки с автомагистрального моста науки

Алан Финкель. «Википедия»
Алан Финкель. «Википедия»

Центральную тему конференции задал нейробиолог и инженер Алан Финкель (Alan Finkel), занимающий должность Australia’s Chief Scientist (научный консультант кабинета министров Австралии). В своем пленарном докладе он сравнил систему публикации научных знаний с мостом, перекинутым через реку. Раньше ученых было мало — и трафик по мосту был ограниченным, специалисты в одной области хорошо друг друга знали и понимали, кто чего стоит. Теперь же ежегодно публикуется более двух миллионов статей, мост стал высокоскоростной магистралью, но архитектурно практически не изменился, что оказалось чревато проблемами. Теперь по мосту незаметно возят контрабанду, опоры трещат, на пропускных пунктах образовались пробки. Это настолько раздражает некоторых ученых, что они и вовсе предпочитают с моста спрыгнуть (так Финкель пошутил про движение Open Science, агитирующее за свободный доступ ко всем научным публикациям и реформу практики издания научных статей).

На конференции говорили о преимуществах и недостатках открытой науки. С одной стороны, ученые чаще всего получают зарплату за счет налогоплательщиков и государства, и общество имеет право знать, на что уходят деньги. Есть много неплохих журналов, публикующих статьи в свободном доступе за деньги авторов, которые, в свою очередь, компенсируют затраты из научных грантов. Увы, на их фоне появилось очень много хищнических журналов, которые тоже предлагают платные услуги, но не предоставляют адекватного рецензирования, проверки качества статей и публикуют любой мусор. Учитывая, что ученые и финансово, и с точки зрения карьерного роста заинтересованы публиковать много статей, хищнические журналы без труда находят клиентов.

Но некачественные статьи публикуют и журналы, работающие по старой издательской схеме — бесплатно для авторов, платная подписка. Мэтт Ходжкинсон (Matt Hodgkinson), отвечающий за борьбу с недобросовестными статьями в издательстве Hindawi, чьи журналы находятся в открытом доступе, привел в качестве примера публикацию Эндрю Уэйкфилда (Andrew Jeremy Wakefield) насчет того, что вакцины вызывают аутизм. Эта резонансная статья, на которую регулярно ссылаются антипрививочники, вышла в журнале Lancet. Правда, потом ее отозвали.

Другой пример — публикация в журнале Progress in Biophysics and Molecular Biology, авторы которой настолько прониклись интеллектуальными способностями осьминогов, что предположили их инопланетное происхождение. По мнению авторов, метеориты занесли либо их оплодотворенные яйца, либо вирусы, которые заразили моллюсков, изменяли их ДНК и так сделали из них осьминогов. Прекрасная научная фантастика, вот только геном осьминога давно опубликован, и никаких загадок его происхождение не таит — вполне типичный головоногий моллюск с Земли, что подтвердит любой зоолог. Увы, среди авторов (и, видимо, рецензентов) зоологов не было. Что не мешало им писать про грядущую «смену парадигмы».

Посмотрите на этого инопланетного пришельца, готовящегося захватить Землю (Creative Commons CC0)
Посмотрите на этого инопланетного пришельца, готовящегося захватить Землю

Со своей стороны я бы добавил, что многие журналы, публиковавшие статьи о скрытой гомеопатии, также работали по подписке, а не по принципу открытого доступа. А вот открытый журнал PLOS One быстрее всех отреагировал и отозвал одну из некачественных публикаций. Надо также сказать, что нашумевшая «память воды» началась с публикации в Nature, которую потом в том же журнале и опровергли. Но так и не отозвали.

Препринты и научная колбаса

Горячие дебаты прошли вокруг темы препринтов. Сторонники отмечали, что препринты позволяют научной общественности реагировать на статьи до того, как те будут опубликованы, а авторам оперативно обновлять свой материал с учетом критики. Такие препринты ускоряют обмен знаниями, способствуют обнародованию отрицательных результатов и зарождению дискуссии вокруг противоречивых тем. Противники утверждали, что препринты являются источником фейковых научных новостей, цитируются журналистами без понимания, что статья не прошла рецензирование специалистами. При этом большинство препринтов вообще не получает никаких комментариев. Кроме того, журналы могут не хотеть публиковать то, что и так уже выложено, а наличие большого количества разных вариантов одной и той же статьи может создавать путаницу и приводить к цитированию устаревших версий.

Добавлю, что на конференции активно обсуждалась проблема «публикуйся или умри». Ученые испытывают невероятное давление, заставляющее их публиковаться любой ценой, что приводит к изобилию некачественных или просто бессмысленных, неоригинальных и ненужных статей. Некоторые просто дублируют одни и те же статьи: один из докладчиков, биолог Гарольд Гарнер (Harold Garner), выступил с рассказом о большой базе данных таких дупликаций.

Существует также методика, которую на русский можно перевести словосочетанием «нарезка колбасы» — когда одна работа «нарезается» на части, после чего вместо одной статьи появляется множество очень на нее похожих. Это не самый страшный грех, но часто встречающийся. Знаменитый Джон Иоаннидис (John Ioannidis), знаменитый статьями о проблемах воспроизводимости научных результатов, опубликовал статью в Science, посвященную ученым, публикующим более 70 статей в год, — получается, что такие авторы публикуются каждые пять дней. Это, конечно, вызывает подозрения. Но иногда всё не так плохо. Например, дело одного из этих ученых расследовала специальная комиссия института, которая пришла к выводу, что человек не занимался плагиатом, ничего не подделывал, не дублировал, а просто хорошо адаптировался, имел много международных коллабораций и иногда «нарезал колбасу» — но без нарушений научной этики. Так что и такое бывает.

Поймай меня, если сможешь

Научная «колбаса» и осьминоги-инопланетянеОчень интересно, что же на конференции обсуждали многочисленные представители гуманитарных наук. На основной секции было отмечено, что многие соображения о научной честности из биомедицинской литературы (где эта проблема обсуждается наиболее активно) можно пытаться адаптировать к гуманитарным исследованиям. Первым в тематической секции выступил профессор Сорен Холм (Søren Holm) из Манчестерского университета, занимающийся проблемами биоэтики. Его доклад назывался «Нарушения принципов исследований в неэмпирических работах — есть ли аналоги фальсификаций или фабрикаций данных?». Ответ автора был утвердительным. Например, если философ взялся рассуждать об этичности эвтаназии или легализации проституции, но для своего аргумента подгоняет эмпирические данные (игнорирует неудобные биологические или социологические факты), то это явное нарушение научных принципов. Другой пример нарушений, по мнению докладчика, — когда для обоснования вывода в тексте происходит подмена значений термина или термин намеренно трактуется то слишком широко, то узко. Третий — когда из работы напрямую следуют некие невероятные или абсурдные следствия, которые автор умышленно заметает под ковер, чтобы не вызвать скепсис у читателей.

Другой докладчик, Тецуя Исэдо (Tetsuya Isedo) из Университета Киото, говорил о проблеме вымышленных источников. Как Карлос Кастанеда предположительно выдавал за реального человека вымышленного Дона Хуана, так и некоторые авторы книг по истории использовали источники, которые на самом деле не существуют. Одно исследование, посвященное сравнению представлений гуманитариев и естественников о том, что является нарушением научных подходов, выявило, что сходств между первыми и вторыми больше, чем отличий. А главное отличие заключается в том, что гуманитарные исследователи особенно переживают, когда работа, на их взгляд, недостаточно оригинальна.

Масштабы бедствия оказались устрашающими. Оказывается, ученые часто даже не знают, что плагиат и другие нарушения в науке — это плохо. На эту тему было много выступлений, и, кстати, одно из таких исследований проведено в России. В докладе о нем прозвучали ответы людей, участвовавших в анонимном опросе, о причинах нарушений научной этики. Многие отвечали в духе: «Я знал, что меня никто не поймает», «Все так делают, значит, и я могу», «Мне не хватало размера выборки для получения статистической значимости, поэтому я всё умножил в несколько раз».

Один из постеров был посвящен статистическим методам, которые авторы используют в научных статьях. Разработана масса приложений, статистических пакетов, которые позволяют просто ввести цифры и получить заветный P-value. Этими приложениями пользуются люди, которые часто не знают, как работает статистический тест, какие у него допущения, когда его можно или нельзя применять. Например, в работах, которые использовали статистический тест ANOVA, практически никогда не учитываются допущения, которые при этом необходимо принять. В качестве решения проблемы предлагалось консультироваться со специалистом по статистике до начала исследования.

Многие постеры и доклады на конференции касались того, как в разных университетах и институтах пытаются вводить программы по обучению студентов и аспирантов этике проведения научных исследований, а также основам честных подходов в науке. Оборотной стороной медали, по моим ощущениям, является генерация довольно большого количества бессмысленных текстов уже по теме «научной честности», которые попадались мне и на этой конференции, — видимо, это всё та же проблема с мостом, ставшим магистралью. Тема научной честности стала невероятно популярной, на такие исследования тоже выделяются гранты, экспоненциально растет количество публикаций. Наверное, скоро будут конференции по корректным исследованиям в области корректности исследований. С другой стороны, если люди задумаются, всё ли возможное сделано на пути к объективности, это уже будет некоторый шаг вперед.

Особенности национальной псевдонауки

Как выглядит Россия в этом контексте? Василий Власов, доктор медицинских наук, рассказывая о «Диссернете», отметил, что около 20% ректоров российских вузов имеют списанные диссертации. Я и раньше знал эту цифру, но не задумывался о двух важных элементах контекста. По данным того же «Диссернета», на один документ, который является несомненным плагиатом, в среднем приходится четыре, которые были куплены. Понятно, что экстраполировать не совсем корректно, но если это сделать, то картина выглядит совсем печально.

Второй контекст: во всем мире борьба с плохой наукой идет преимущественно сверху вниз. Высокопоставленные ученые и ректоры университетов, стремясь улучшить качество науки и сохранить репутацию вверенного им учреждения, принимают к этому активные меры. Например, в Индии организация, которая дает научные гранты, собирается бороться с плохими и хищническими журналами, составляя списки хороших, ориентируясь на современные мировые тренды. Что делать в России, если в качестве активной меры следовало бы уволить существенную часть ректоров? Что делать в России, когда из экспертных советов ВАКа выводят тех немногих, кто страстно отстаивал научную честность и боролся с плагиатом и фальсификациями, вроде тех же членов «Диссернета»? А в списки ВАКа, напротив, вводят откровенно мусорные журналы, в том числе по теологии? Хорошая новость состоит в том, что недавно наряду с Комиссией по борьбе с лженаукой в Академии наук появилась Комиссия по фальсификациям научных исследований, с большим количеством замечательных и активных участников. Посмотрим, что им удастся сделать.

Небольшая надежда есть на международное сообщество. Например, я узнал, что существует Комитет по публикационной этике (Committee on Publication Ethics, COPE). Для западных издателей эти четыре буквы сегодня значат очень много. Есть процедура, по которой научные журналы принимают стандарты этого комитета. Это придает им некоторой легитимности, но тогда к ним предъявляются определенные требования — и в случае нарушений журнал может лишиться права быть членом COPE. Проверить, входит ли журнал в COPE, очень легко: просто вбить его название на сайте в разделе «Members».

Кстати, в результате нашей борьбы с плохими статьями Олега Эпштейна про релиз-активные препараты несколько журналов его публикации отозвали. Но чаще мы сталкивались с равнодушием редакторов. На конференции я пообщался с представителями некоторых издательств этих журналов (Hindawi, Springer, Nature, Elsevier). Все они пообещали разобраться в ситуации. А еще я узнал, что жаловаться можно напрямую в COPE. Например, если какой-то журнал совсем «заврался» и публикует очень много ерунды.

Проверим, насколько это работает.

Александр Панчин,
канд. биол. наук

Выступление Александра Панчина: 
youtu.be/h23_JPlWWIY

От редакции. Доклад Александра Панчина о публикациях про так называемую релиз-активность, сделанный совместно с Евгенией Дуевой и Василием Власовым, получил одну из трех вторых премий за лучший устный доклад.

Подписаться
Уведомление о
guest

5 Комментария(-ев)
Встроенные отзывы
Посмотреть все комментарии
Denny
Denny
5 года (лет) назад

«Но некачественные статьи публикуют и журналы, работающие по старой издательской схеме — бесплатно для авторов, платная подписка. »

Это лукавство. Таким подходом можно смазать все, что угодно. В самом совершенном государстве есть воровство и коррупция. И в самом коррумпированном есть случаи честной и благородной работы. Просто посмотрите статистику. Есть журналы, работающие для читателей и живущие за их счет. А есть журналы для писателей. Кто платит, тот и заказывает музыку.

Колоссальная проблема современной науки в том, что от ученых вообще уже мало что зависит. Направления определяют фонды, дающие гранты. Рулят всякие рейтинговые агентства, непонятные конторы, которые никто не уполномочил раздавать оценки и создавать рейтинги, разнообразные ассоциации и пр. Понятно, что при массовой науке без таких структур нельзя. Но плохо то, что эта бюрократическая надстройка существует сама по себе. Ничего не замыкается на тех, кто реально работает в институтах и лабораториях. Рвутся обратные связи, без которых невозможна устойчивая работа системы.

Одним из важных видов такой обратной связи была готовность ученых и научных организаций платить за конкретную статью или подписку на конкретный журнал. Готовность потребителя платить за товар всегда лежит в основе поддержания качества.

В.П.
В.П.
5 года (лет) назад
В ответ на:  Denny

Эта обратная связь — готовность учёных и научных организаций платить за статью или подписку — уже порвана. Подписку на издания продают громадными пакетами, 99% которых не нужно конкретной организации, а половина ненужна вообще никому. Решение о подписке принимает не научная организация, а целое научное сообщество, а то и министерство (как в России). Конкретный учёный не платит за статью из своего кармана: либо у его организации есть подписка, либо он скачивает с sci-hab, либо просит файл статьи в частном порядке.

Denny
Denny
5 года (лет) назад
В ответ на:  В.П.

И это плохо. Именно про такие тенденции я и писал. Советские продуктовые наборы помните?

Роман
Роман
5 года (лет) назад
В ответ на:  Denny

очень интересно, что же там за доклад был про наш РНФ? Жаль в заметке автор ничего не упомянул. Неужели хвалили?)))))

Alex
Alex
5 года (лет) назад

Всё это очень странно. Чего только не спонсируют в современном мире. Почему никто не жертвует небольшие суммы на издание хороших бесплатных журналов? Здесь что-то не так.

Оценить: 
Звёзд: 1Звёзд: 2Звёзд: 3Звёзд: 4Звёзд: 5 (4 оценок, среднее: 3,75 из 5)
Загрузка...