Как провести критический анализ научной статьи: дизайн, результаты и применимость

Короткий ответ: критический анализ научной статьи отвечает на четыре разных вопроса: что именно исследовали, насколько правдоподобен результат, что показывают числа и применим ли вывод к вашей задаче. Читать только аннотацию и заключение недостаточно. Надёжная оценка начинается с вопроса и дизайна, затем переходит к методам и риску систематической ошибки, после — к величине эффекта и неопределённости, и только в конце — к интерпретации авторов.

Критическая оценка не сводится к поиску недостатков. Её цель — понять, какую часть результата можно использовать и с какой уверенностью. Хорошо написанная статья может описывать слабое исследование, а неполное описание не всегда доказывает, что метод был выполнен неправильно. Поэтому полноту отчётности, риск систематической ошибки, точность результата и применимость оценивают раздельно.

Карта критического анализа

1. Уточните, что перед вами

Сначала определите тип публикации. Оригинальное исследование, систематический обзор, нарративный обзор, клинический случай, протокол, редакционный материал и клиническая рекомендация требуют разных способов чтения.

Проверьте:

• содержит ли статья собственные данные;
• какой дизайн заявлен авторами;
• соответствует ли фактический метод этому названию;
• является ли публикация основным отчётом, протоколом или дополнительным анализом;
• есть ли регистрационный номер;
• не относится ли она к тому же исследованию, что уже найденная работа.

Название дизайна нельзя принимать без проверки. Работа может называться «проспективной», но не иметь заранее определённого плана анализа; «случай-контроль» иногда ошибочно используют для любого ретроспективного сравнения.

2. Сформулируйте вопрос статьи своими словами

Для клинического вопроса выпишите:

• P — кого исследовали;
• I/E — какое вмешательство или воздействие оценивали;
• C — с чем сравнивали;
• O — какой исход измеряли;
• T — когда его измеряли.

Для диагностической работы отдельно укажите индексный тест и референсный стандарт. Для прогностической модели — целевую популяцию, момент прогноза, горизонт, исход и способ валидации. Для качественного исследования — контекст, участники, изучаемый опыт и аналитический подход.

Если после чтения цели и методов вопрос нельзя сформулировать однозначно, это важное ограничение. Не заменяйте его более удобным вопросом от себя.

3. Проверьте соответствие дизайна вопросу

Разные дизайны позволяют разные выводы:

Иерархия дизайнов не заменяет соответствие вопросу. РКИ обычно не лучший способ выявления очень редкого позднего вреда, а качественное исследование может быть оптимальным для изучения опыта пациента.

4. Читайте методы раньше обсуждения

После аннотации и цели переходите к методам, не к заключению. Выясните:

1. где и когда проводилось исследование;
2. как набирались участники;
3. какие критерии включения и исключения применялись;
4. как формировались группы;
5. как измерялись вмешательство, воздействие и исходы;
6. какие исходы были основными;
7. как определялся размер выборки;
8. как обрабатывались пропуски;
9. какие анализы были запланированы;
10. зарегистрирован ли протокол и совпадает ли он с публикацией.

Фразы «стандартная терапия», «обычная методика» и «общепринятый анализ» требуют расшифровки. Без дозы, времени, метода измерения или модели статистического анализа результат трудно повторить и оценить.

5. Оценивайте риск ошибки по дизайну и результату

Риск систематической ошибки — это возможность того, что дизайн, проведение, анализ или выбор опубликованного результата систематически отклонили оценку от истины. Он не равен размеру выборки и не исправляется узким доверительным интервалом.

Для РКИ RoB 2 оценивает конкретный результат по доменам рандомизации, отклонений от вмешательств, пропущенных данных, измерения исхода и выбора сообщённого результата. Для систематических обзоров применяют AMSTAR 2, для диагностической точности — QUADAS-2, для нерандомизированных исследований вмешательств — ROBINS-I.

Не складывайте ответы в самодельный универсальный балл, если инструмент этого не предусматривает. Суждение должно сопровождаться основанием и ссылкой на фрагмент статьи или протокола. Подробное сравнение дано в материале RoB 2 и AMSTAR 2.

6. Разделяйте полноту отчётности и качество методов

CONSORT, STROBE, PRISMA, STARD, TRIPOD и CARE помогают проверить, сообщены ли необходимые сведения. Они не являются универсальными шкалами качества.

Пример: отсутствие описания сокрытия распределения означает, что риск ошибки трудно оценить. Это не то же самое, что доказанное отсутствие сокрытия. И наоборот, заполненный чек-лист CONSORT не гарантирует низкий риск ошибки, если сама рандомизация была нарушена.

EQUATOR Network помогает выбрать руководство по дизайну. Используйте его для полноты, а методический инструмент — для валидности.

7. Извлеките результат до чтения вывода авторов

Для каждого основного исхода выпишите:

• число участников в анализе;
• число событий или среднее значение;
• знаменатель для процента;
• меру эффекта;
• 95 % доверительный интервал;
• точное p-значение, если оно приведено;
• временную точку;
• абсолютный эффект, если он доступен;
• число и причины пропусков.

Относительный риск без базового риска может выглядеть впечатляюще, но не показывает абсолютный эффект. Снижение относительного риска на 50 % означает разное при исходном риске 20 % и 0,2 %.

Почему p < 0,05 недостаточно

p-значение не показывает размер эффекта, клиническую важность или вероятность истинности гипотезы. Малый эффект в большой выборке может иметь очень малое p, а потенциально важный эффект в небольшой работе — широкий интервал, включающий и пользу, и вред.

Cochrane Handbook, chapter 15 рекомендует сосредоточивать интерпретацию на оценке эффекта и доверительном интервале, а не делить результаты на «значимые» и «незначимые». Отсутствие статистической значимости не равно доказательству отсутствия эффекта.

8. Проверьте статистическую логику

Необязательно пересчитывать всю статью, но нужно понять соответствие анализа данным:

• учитывает ли модель тип исхода;
• соблюдена ли единица анализа;
• учтена ли кластеризация или повторные измерения;
• не анализируются ли после рандомизации только завершившие лечение;
• описана ли работа с пропусками;
• не выбраны ли подгруппы после просмотра результатов;
• есть ли поправка или план для множественных сравнений;
• совпадают ли первичный исход и анализ с протоколом;
• представлены ли предпосылки модели и чувствительные анализы.

Большое число тестов повышает вероятность случайной «положительной» находки. Неожиданный результат подгруппы может быть гипотезой для будущей проверки, но не обязан доказывать эффект.

Формат представления статистики полезно сверять с SAMPL.

9. Сопоставьте протокол, регистрацию и публикацию

Если доступны протокол, запись в реестре или план статистического анализа, сравните:

• основной исход;
• временную точку;
• размер выборки;
• критерии включения;
• запланированные подгруппы;
• основной анализ;
• дату изменений.

Расхождение не всегда означает нарушение: протоколы меняются по обоснованным причинам. Но изменение должно быть датировано и объяснено. Необъяснимое исчезновение отрицательного исхода или появление нового «основного» результата после анализа повышает риск выборочного представления.

10. Проверьте целостность публикации

До цитирования убедитесь, что DOI или PMID относится к нужной статье, и проверьте страницу издателя или библиографическую запись на наличие исправления, выражения обеспокоенности или отзыва.

Также изучите:

• финансирование;
• роль спонсора;
• конфликты интересов;
• доступность данных и кода;
• вклад авторов;
• этическое одобрение и регистрацию;
• использование ИИ и способ его раскрытия.

Конфликт интересов не доказывает ошибочность результата, а отсутствие декларации не доказывает независимость. Эти сведения меняют контекст оценки и требуют прозрачности.

11. Оцените применимость отдельно от достоверности

Исследование может быть внутренне надёжным, но плохо отвечать вашей задаче. Сравните:

• возраст и тяжесть состояния;
• сопутствующие заболевания;
• критерии исключения;
• дозу и способ применения;
• реальную альтернативу в контрольной группе;
• продолжительность наблюдения;
• определение исхода;
• уровень медицинской помощи;
• ресурсы и систему здравоохранения.

Применимость не сводится к тому, «похож ли средний пациент». Иногда биологическое различие невелико, но организационные условия делают вмешательство недоступным. Иногда суррогатный исход измерен точно, но не отвечает на важный для пациента вопрос.

12. Напишите собственный вывод в четыре строки

До чтения обсуждения авторов сформулируйте:

1. Вопрос и дизайн: что и каким способом проверяли.
2. Главный результат: величина эффекта и неопределённость.
3. Основное ограничение: какой риск ошибки или непрямота важнее всего.
4. Применимость: к кому и при каких условиях относится результат.

Затем сравните свой вывод с абстрактом и заключением статьи. Если авторы используют более сильный язык, найдите, чем он обоснован. Фразы «эффективно», «безопасно» и «может быть рекомендовано» должны соответствовать данным, дизайну и оценке всей совокупности доказательств, а не одному p-значению.

Быстрый шаблон критического разбора

Библиографическая запись: DOI/PMID, версия, исправления или отзыв. Вопрос: PICO/PECO/другая структура. Дизайн и место: тип, центры, период. Участники: критерии, набор, группы, потери. Вмешательство/воздействие и сравнение: точное описание. Основной исход: определение и временная точка. Результат: абсолютные числа, эффект, 95 % ДИ. Риск ошибки: инструмент, домены, основания и цитаты. Статистические ограничения: пропуски, множественность, подгруппы, модель. Применимость: различия с вашей задачей. Финансирование и конфликты: что раскрыто. Итог: что можно использовать и с какой осторожностью.

Как Sciente поддерживает критический анализ

В Sciente запись статьи, библиографические идентификаторы, полный текст и заметки остаются связанными внутри проекта. Исследовательский агент может определить предполагаемый дизайн с цитатой, предложить подходящий инструмент и показать обоснование по материалам работы. Модуль доказательности хранит оценки и позволяет отделять методическое суждение от общего впечатления о статье.

Матрица доказательств связывает тезисы с поддерживающими и опровергающими источниками. Это помогает заметить ситуацию, когда корпус подтверждает только одну сторону вопроса. Однако система не превращает автоматическое суждение в окончательное: решение о дизайне, риске ошибки и применимости утверждает исследователь.

Начать следует с поиска научных статей, затем перейти к источникам знаний и полному тексту. Для систематического обзора используйте протокол поиска и отбора, а для подготовки рукописи — маршрут медицинской научной статьи.

Основные источники

• CASP critical appraisal checklists — вопросы для РКИ, когорт, случай-контроль, диагностических, качественных исследований и обзоров.
• Greenhalgh T. Assessing the methodological quality of published papers. BMJ. 1997;315:305. DOI: 10.1136/bmj.315.7103.305.
• Cochrane Handbook, chapter 7 — риск систематической ошибки и конфликты интересов.
• Cochrane Handbook, chapter 15 — интерпретация величины эффекта, доверительных интервалов и применимости.
• EQUATOR Network — руководства по полноте отчётности.
• SAMPL — представление статистических методов и результатов.

Дата актуализации: 10 октября 2026 года. Материал предназначен для анализа исследований и не является индивидуальной медицинской рекомендацией.

От оценки одной статьи к обзору корпуса

Когда отдельные публикации разобраны, следующий уровень — обзор литературы с тематическим синтезом, противоречиями и исследовательским пробелом.