Как оценить клинические данные китайского ИВД-теста

Хорошая таблица чувствительности и специфичности ещё не доказывает, что ИВД-тест подходит для конкретной лаборатории или российского рынка. Необходимо проверить дизайн исследования, образцы, референсный метод, статистику, исключённые данные, версию продукта и независимость источника.

Главный вопрос не «есть ли клиническое исследование», а «что именно оно доказывает и можно ли применить вывод к нашей задаче».

Краткий ответ

При оценке клинических данных проверьте:

1. точный продукт и версию;
2. предназначение;
3. исследуемую популяцию;
4. типы образцов;
5. референсный метод;
6. размер выборки;
7. положительные и отрицательные случаи;
8. чувствительность и специфичность с интервалами;
9. расхождения;
10. исключённые данные;
11. независимость исследования;
12. применимость к России.

Сначала идентифицируйте продукт

Сопоставьте:

• коммерческое название;
• модель;
• каталожный номер;
• картридж;
• версию ПО;
• IFU;
• производителя;
• площадку;
• дату исследования.

Исследование старой версии не всегда подтверждает текущую версию.

Проверьте intended use

Данные должны соответствовать:

• заболеванию;
• аналиту;
• образцу;
• популяции;
• пользователю;
• лабораторной среде;
• клинической роли;
• заявленному результату.

Нельзя использовать исследование мокроты как полное доказательство для всех внелёгочных образцов.

Кто проводил исследование

Возможные уровни:

Источник должен быть явно указан.

Дизайн исследования

Проверьте:

• проспективное или ретроспективное;
• последовательный или удобный набор;
• одноцентровое или многоцентровое;
• слепая интерпретация;
• заранее определённый протокол;
• зарегистрированные изменения;
• клинические или архивные образцы;
• реальные или искусственные материалы.

Искусственные панели полезны для аналитики, но не заменяют клинические образцы.

Популяция

Важны:

• возраст;
• ВИЧ;
• лечение;
• распространённость заболевания;
• риск устойчивости;
• стационар или амбулатория;
• регион;
• тяжесть;
• дети;
• внелёгочные формы;
• ранее леченные пациенты.

Результат в одной популяции нельзя автоматически переносить на другую.

Типы образцов

Для каждого типа образца должны быть отдельные данные или обоснование.

Проверьте:

• количество;
• способ отбора;
• хранение;
• транспортировку;
• объём;
• подготовку;
• референсный метод;
• долю положительных;
• invalid rate.

Подробнее:

Доказательства для образцов, отличных от мокроты.

Референсный метод

Референс должен соответствовать вопросу.

Для TB могут использоваться:

• культура;
• идентификация культуры;
• фенотипический DST;
• секвенирование;
• составной референсный стандарт;
• экспертная клиническая классификация.

У каждого подхода есть ограничения.

Если культура используется как абсолютный эталон, нужно учитывать контаминацию и ложноотрицательную культуру.

Размер выборки

Не смотрите только на общее число.

Пример:

Всего 800 образцов
Положительных MTB — 42
RIF-R — 9
Внелёгочных — 15
Детских — 7

Большая общая выборка может содержать мало случаев для ключевого заявления.

Чувствительность и специфичность

Запросите:

• числитель;
• знаменатель;
• доверительный интервал;
• анализ по типам образцов;
• анализ по бактериальной нагрузке;
• анализ по подгруппам;
• правила для invalid;
• обработку расхождений.

Показатель без доверительного интервала недостаточен для оценки точности.

Predictive values

Положительная и отрицательная прогностическая ценность зависят от распространённости.

Высокая специфичность не гарантирует одинаковую PPV во всех условиях.

Поэтому данные страны с другой распространённостью нельзя механически переносить.

Invalid и исключённые результаты

Проверьте:

• сколько invalid;
• сколько ошибок;
• сколько исключено;
• почему исключено;
• включены ли повторы;
• использован ли анализ intention-to-diagnose;
• как обработаны недостающие данные.

Исключение всех неудобных результатов может завысить эффективность.

Расхождения

Каждое расхождение должно быть объяснено.

Проверьте:

• повтор;
• третий метод;
• секвенирование;
• лечение;
• предыдущий результат;
• контаминацию;
• ошибку образца;
• остаточную ДНК;
• окончательную классификацию.

Что делать при расхождении ПЦР и культуры.

Аналитические данные и клинические данные

Аналитические данные

• LoD;
• интерференции;
• перекрёстная реактивность;
• повторяемость;
• воспроизводимость;
• партии;
• стабильность.

Клинические данные

• чувствительность;
• специфичность;
• клинические образцы;
• популяция;
• сравнение;
• реальный workflow.

Одна группа данных не заменяет другую.

Применимость к России

Проверьте различия:

• популяция;
• генетическое разнообразие;
• устойчивость;
• образцы;
• инфраструктура;
• температура;
• логистика;
• персонал;
• диагностический алгоритм;
• регуляторная классификация.

Китайское исследование может быть ценным, но часто требует дополнительной локальной проверки.

Красные флаги

• только рекламная таблица;
• нет протокола;
• нет числителей и знаменателей;
• нет доверительных интервалов;
• не указана версия продукта;
• исключены invalid;
• неизвестен референс;
• мало положительных случаев;
• нет данных по ключевому образцу;
• статья о другом продукте;
• производитель называет внутреннее исследование независимым;
• результаты только на искусственных панелях;
• нет объяснения расхождений;
• заявление шире данных.

Практическая таблица оценки

Пример iFIND

При оценке iFIND нужно разделить:

• материалы производителя;
• внутренние валидации;
• публикации;
• независимые исследования;
• данные конкретного картриджа;
• данные конкретной версии;
• данные для конкретного образца.

Фраза «используется более чем в 100 учреждениях» должна маркироваться как заявление производителя, если нет независимого подтверждения.

Связь с локальной верификацией

Даже хорошие клинические данные не отменяют локальную верификацию рабочего процесса.

Как провести локальную верификацию нового ПЦР-теста.

Что важно помнить

• Таблица показателей не равна полной доказательной базе.
• Нужно проверить точный продукт и версию.
• Размер ключевой подгруппы важнее общего числа.
• Invalid и исключённые данные должны быть прозрачны.
• Исследование производителя требует отдельной маркировки.
• Данные одной страны не всегда полностью применимы к другой.
• Локальная верификация остаётся необходимой.

Источники и границы доказательств

Материал основан на принципах WHO по оценке эффективности ИВД, процедуре performance evaluation и подходах к анализу клинической и аналитической эффективности. Он не является регуляторным заключением.

Профессиональное уведомление

Материал предназначен для специалистов по лабораторной диагностике, закупкам и оценке технологий. Он не подтверждает качество, регистрацию или пригодность конкретного продукта.

CTA

Нужна независимая структура проверки клинических данных?

Запросите форму оценки исследования, таблицу расхождений и список документов для производителя.

Запросить форму оценки доказательств