Журнал
Как устроено двойное слепое рецензирование и кто чьё имя видит?
При двойном слепом рецензировании рецензенты не видят, кто написал рукопись, а авторы не видят, кто её рецензировал; редактор, который принимает решение, знает и тех, и других. Стандарт терминологии NISO 2023 года называет эту модель двойной анонимной. Опыт со случайным разделением рецензентов на конференции WSDM 2017 показал: рецензенты, видевшие имена авторов, ставили выше статьи известных авторов и ведущих организаций.

Что такое двойное слепое рецензирование?
Модель рецензирования, при которой рецензенты не видят имени автора, а автор не видит имён рецензентов. Редактор, который принимает решение, видит имена обеих сторон.
Определение дал стандарт ANSI/NISO Z39.106-2023 «Стандартная терминология рецензирования», утверждённый Американским национальным институтом стандартов 5 июня 2023 года. Стандарт называет модель double anonymized, двойной анонимной. Рецензент не видит автора, автор не видит рецензента, а редактор, принимающий решение, видит обоих.
Роль редактора авторы часто упускают. Двойная анонимность скрывает имена между авторами и рецензентами, но не от журнала. Редактор получает титульный лист с именами и местами работы, выбирает рецензентов и читает их заключения с подписями. Так он проверяет, что рецензент не работает вместе с автором и не конкурирует с ним.
Стандарт описывает анонимность как один из четырёх элементов процедуры рецензирования. Три других: с кем взаимодействует рецензент, что из рецензирования публикуется и разрешены ли комментарии после публикации. Журнал, который назвал себя журналом с двойным слепым рецензированием, ответил только на первый из этих вопросов.
Чем оно отличается от одностороннего, тройного и открытого рецензирования?
Тем, кто чьё имя видит. При одностороннем анонимном рецензировании рецензент знает автора. При тройном анонимном даже редактор не видит ни автора, ни рецензента. При открытом автор и рецензент знают друг друга.
Стандарт NISO Z39.106-2023 называет четыре варианта прозрачности имён. При одностороннем анонимном рецензировании автор не видит рецензента, а рецензент видит автора; редактор видит обоих. При двойном анонимном стороны друг друга не видят, редактор видит обоих. При тройном анонимном имена автора и рецензента не видны ни автору, ни рецензенту, ни редактору, принимающему решение. При полной открытости рецензент виден автору, а автор рецензенту.
Второй элемент, с кем взаимодействует рецензент, имеет в стандарте три варианта: с редактором, с другими рецензентами и с авторами. Рецензент журнала с двойным анонимным рецензированием обычно пишет только редактору, а редактор передаёт автору обезличенные замечания.
Третий элемент касается публикации материалов рецензирования. Стандарт перечисляет одиннадцать вариантов, среди них: ничего, краткое изложение рецензий, полные рецензии с согласия автора или рецензента и без него, поданная рукопись, переписка автора с редактором, имена рецензентов или редакторов. Четвёртый элемент, комментарии после публикации, бывает открытым или по приглашению. Журнал может рецензировать анонимно, а после выхода статьи публиковать рецензии.
Почему журналы пишут «анонимное», а не «слепое» рецензирование?
Стандарт NISO заменил слово blind на anonymized, чтобы уйти от выражений, задевающих людей с инвалидностью. COPE изменил формулировку своих руководящих принципов для рецензентов на anonymised review 29 февраля 2024 года.
Рабочая группа NISO объяснила выбор в самом стандарте: слово blind заменено на anonymized из-за опасений, что оно звучит оскорбительно для людей с инвалидностью (ableist terms). Процедура за словами осталась той же. Журнал с двойным слепым и журнал с двойным анонимным рецензированием скрывают одни и те же имена от одних и тех же людей.
Комитет по публикационной этике (COPE) последовал за NISO. В истории версий его «Этических принципов для рецензентов», версия 2 от сентября 2017 года, записана замена формулировки на anonymised review 29 февраля 2024 года. Старые страницы журналов, правила для авторов и объявления конференций пишут double-blind, поэтому в системах подачи встречаются оба термина.
Для автора проверка от названия не зависит. Политика журнала должна сказать, кто видит титульный лист, видят ли рецензенты рецензии друг друга и что публикуется вместе со статьёй. Журнал, который пишет только «двойное слепое рецензирование» без этих подробностей, оставляет автора гадать.
Зачем нужно рецензирование и что оценивает рецензент?
ICMJE определяет рецензирование как критическую оценку поданных в журналы рукописей экспертами, которые обычно не входят в штат редакции. По рецензиям редакторы решают, какие рукописи подходят их журналам.
Международный комитет редакторов медицинских журналов (ICMJE) описывает роли авторов, рецензентов и редакторов в своих Рекомендациях, в разделе об обязанностях при подаче рукописи и рецензировании. Рецензирование там названо критической оценкой рукописей, поданных в журналы, экспертами, которые обычно не работают в редакции. По тексту ICMJE, по рецензиям редакторы решают, какие рукописи подходят их журналам.
Анонимность меняет то, на что опирается рецензент. Без имён он читает методы, данные и доводы такими, как они написаны, и не может учесть репутацию лаборатории или университета. Решение по-прежнему за редактором; рецензент даёт мнение, которое редактор читает вместе со второй рецензией.
Что рецензент обязан хранить в тайне?
Рукопись и её содержание. По Рекомендациям ICMJE рецензент не обсуждает работу публично, не присваивает идеи авторов до публикации, не оставляет рукопись себе и уничтожает копии после отправки рецензии.
ICMJE объясняет причину: преждевременное раскрытие любых подробностей рукописи может навредить авторам. Поэтому рецензенты хранят рукописи и сведения из них в строгой тайне. Они не обсуждают работу авторов публично, не присваивают их идеи до выхода статьи и не оставляют рукопись для личного пользования; копии уничтожают после отправки рецензии.
Помощь коллеги допустима, если о ней сказано. Если в рецензии участвовал аспирант или коллега, рецензент называет его в комментариях для редактора. ICMJE также просит рецензентов отвечать быстро, соблюдать согласованный срок и писать замечания конструктивно, честно и вежливо.
Тайна действует и в обратную сторону. По тексту ICMJE для журналов редакторы не публикуют и не предают огласке замечания рецензентов без согласия рецензента и автора. Если журнал скрывает имена рецензентов, их не раскрывают ни автору, ни кому-либо ещё без прямого письменного согласия рецензента.
Когда рецензент должен отказаться от рукописи?
Когда отношения или занятия рецензента могут сделать оценку предвзятой. ICMJE просит рецензентов сообщать о таких отношениях и отказываться при конфликте интересов. Политики журналов называют типичные случаи: соавторство, научное руководство, общий работодатель, финансовый интерес.
Двойная анонимность не убирает конфликт интересов, она скрывает его от автора. Рецензент, который узнал данные своего бывшего ученика или проект конкурента, знает о возможной несправедливости рецензии больше, чем автор. Поэтому ICMJE просит рецензентов раскрывать отношения и занятия, которые могут повлиять на оценку, и отказываться от рецензии, если конфликт есть.
Конфликты редактор проверяет до назначения рецензентов: только он видит оба имени. Руководство COPE описывает общие обязанности: журналы публикуют понятную политику рецензирования, а рецензенты рецензируют этично и подотчётно. Ясную связь между ними COPE прямо называет условием последовательного, справедливого и своевременного рецензирования.
Меняет ли скрытое имя автора решения рецензентов?
В одном опыте со случайным разделением рецензентов изменило. На WSDM 2017 рецензенты, видевшие имена авторов, ставили выше статьи известных авторов и ведущих организаций и заявляли интерес к статьям примерно на 22 процента реже.
Опыт провели на конференции WSDM 2017 по веб-поиску и анализу данных. Эндрю Томкинс, Мин Чжан и Уильям Хевлин случайно разделили программный комитет на две группы: одностороннюю слепую, которая видела имена и организации авторов, и двойную слепую, которая их не видела. Каждую статью рецензировали по два человека из каждой группы. Результаты вышли в Proceedings of the National Academy of Sciences в 2017 году под названием «Reviewer bias in single- versus double-blind peer review».
По статье авторов, рецензенты, видевшие имена, чаще давали благоприятную рецензию статьям известных авторов, ведущих университетов и ведущих компаний: множители шансов 1,63, 1,58 и 2,10. Они выбирали для рецензирования примерно на 22 процента меньше статей и чаще выбирали статьи ведущих университетов и компаний, с множителями шансов 1,13 и 1,17. По статьям женщин-авторов множитель шансов на благоприятную рецензию был 0,78; в одном этом исследовании разница не была статистически значимой, а метаанализ семи исследований, проведённый авторами, нашёл значимый эффект в совокупности.
Анонимность не бывает полной, и авторы об этом написали. В ответе 2018 года в PNAS они написали, что в той мере, в какой имена авторов известны, опытная группа становится похожей на контрольную, поэтому такие утечки занижают настоящий эффект. Там же сказано, что результат не гарантирует того же на других конференциях и в журналах.
Как автору подготовить рукопись к двойному слепому рецензированию?
Имена выносят на отдельный титульный лист, а из основного текста убирают всё, что выдаёт авторов: имена, места работы и ссылки на собственные работы. Титульный лист остаётся у редактора, рецензенты получают только обезличенный текст.
Стандарт задаёт результат, а не шаги: имя автора не должно быть видно рецензенту. Каждый журнал превращает это в свои правила. Пример - редакционная политика IAE Review. Титульный лист подаётся отдельным файлом: полные имена авторов, места работы, ORCID iD, электронная почта автора для переписки, источники финансирования и сведения о конфликте интересов. Основной текст обезличен, из него убраны имена, места работы и ссылки на собственные работы.
На том же титульном листе стоят сведения, по которым рецензент иначе узнал бы автора: номер гранта, работодатель, соавторы. Раздельная подача даёт редактору проверить конфликт интересов, пока рецензенты работают без имён.
Когда рукопись возвращают на доработку, анонимность сохраняется. По политике IAE Review автор получает обезличенные замечания рецензентов и в течение 30 дней присылает исправленную рукопись и ответ на каждое замечание. Повторное рецензирование обычно проводят те же рецензенты.
Как IAE Review проводит двойное анонимное рецензирование?
Каждая научная рукопись в обезличенном виде уходит не меньше чем к двум независимым рецензентам, которые оценивают её отдельно. Первичное решение принимают до 7 рабочих дней, решение по итогам рецензирования до 60 календарных дней с подачи.
IAE Review, рецензируемый журнал Международной ассоциации экспертов, применяет независимое рецензирование к оригинальным исследованиям, аналитическим обзорам, практическим разборам случаев и методическим разработкам. Рецензентов подбирает редакция по теме рукописи из приглашённых специалистов, компетентность и конфликт интересов проверяются до назначения. Два рецензента оценивают рукопись независимо и по возможности не знают рекомендаций друг друга. Комментарии и рецензии на книги проходят редакционное рецензирование.
Рецензент обязан отказаться, если он соавтор, научный руководитель или подчинённый автора, состоит с автором в личных отношениях, работает в той же организации, прямо заинтересован в результатах финансово или по другой причине не может оценить работу беспристрастно. Рецензенты хранят в тайне рукопись и всю переписку по ней и не используют рукопись до публикации. Редакция не раскрывает имена рецензентов без их явного согласия.
Первичную проверку на соответствие тематике, оформлению, объёму и базовому качеству главный редактор или ответственный редактор проводит до 7 рабочих дней. Каждую рукопись проверяют на некорректные заимствования, ориентир не больше 15 процентов совпадений без правильно оформленных цитат. Каждый рецензент оценивает актуальность, научную новизну, методическую обоснованность, качество изложения и соответствие тематике журнала, ориентир срока рецензирования 21 рабочий день. Решение одно из четырёх: принять без изменений, принять после небольшой доработки, вернуть на доработку с повторным рецензированием или отклонить.
Рукописи принимаются на русском или английском в DOCX, PDF или LaTeX, с аннотацией и 5-8 словами для поиска (keywords) на обоих языках. Членство в IAE не требуется, и решение редакции от него не зависит, плата за обработку статьи не взимается. Отказ автор может обжаловать в течение 30 дней, если видит нарушение процедуры, фактическую ошибку или конфликт интересов рецензента.
Источники
- ANSI/NISO Z39.106-2023, Standard Terminology for Peer Review (NISO)
- ICMJE Recommendations, Responsibilities in the Submission and Peer-Review Process
- COPE, Ethical Guidelines for Peer Reviewers, version 2 (September 2017)
- A. Tomkins, M. Zhang, W. D. Heavlin, Single versus Double Blind Reviewing at WSDM 2017, arXiv:1702.00502 (ar5iv)
- A. Tomkins, W. D. Heavlin, M. Zhang, Reply to Bennett et al., PNAS 115(9):E1941 (2018), PubMed Central
Читайте также
Все статьи
Сколько длится рецензирование научной статьи и чем определяется срок?
Авторы, сообщившие сайту SciRev о 3 500 случаях рецензирования, ждали первого решения в среднем 13 недель, а принятые статьи провели в журнале
Можно ли отправить статью в два журнала одновременно?
В большинстве областей ответ - нет. Рекомендации ICMJE запрещают отправлять одну и ту же рукопись, на том же или на другом языке, сразу в несколько
Можно ли опубликовать научную статью без аффилиации с университетом?
Аффилиация с университетом не условие авторства. Рекомендации ICMJE определяют автора по четырём критериям вклада и ответственности, и ни один из нихЖурнал
Хотите опубликовать статью в IAE Review?
Рукопись на русском или английском в DOCX, PDF или LaTeX через форму подачи на сайте. Первичное решение до 7 рабочих дней.

