Слайд 2
Шаги разработки Кокрейновского систематического обзора
Определите вопрос
Спланируйте критерии приемлемости
доказательств
Спланируйте методы
Проведите поиск исследований
Примените критерии приемлемости
Соберите данные
Оцените исследования на
предмет риска смещения
Проанализируйте и представьте результаты
Интерпретируйте результаты и сформулируйте выводы
Улучшайте и обновляйте обзор
Слайд 3
План
Что такое гетерогенность?
Предположения о гетерогенности
Выявление гетерогенности
Изучение ваших результатов
Слайд 4
Что такое гетерогенность?
Вариация или различия
Три обширных типа:
клиническая
методологическая
статистическая
Слайд 5
Клиническое разнообразие
участники
Например, условия, возраст, пол, месторасположение, критерии приемлемости
исследования,
вмешательства
интенсивность/доза, длительность, доставка (лекарства), дополнительные компоненты, опыт практикующих
врачей, контроль (плацебо, ничего, стандартный уход)
исходы
длительность периода наблюдения, способы измерения, определение события, пороговые точки
Слайд 6
Методологическое разнообразие
Дизайн исследования
Например, рандомизированное против нерандомизированного, перекрестное против
параллельного, индивидуальное против кластер- рандомизированного
Проведение
Например, риск смещения (сокрытие
распределения, ослепление, и т.д.), подход к анализу
Слайд 7
Статистическая гетерогенность
Всегда будет случайная (выборка) вариация между результатами
разных исследований
Гетерогенность является вариацией между эффектами, которые измеряют, в
различных исследованиях
Вызвана клиническим и методологическим разнообразием
Альтернатива гомогенности (идентичные истинные эффекты, лежащие в основе каждого исследования)
Результаты исследований будут более отличны друг от друга, чем если бы случайная вариация была единственной причиной для различий между оцененными эффектами вмешательства
Слайд 8
План
Что такое гетерогенность?
Предположения о гетерогенности
Выявление гетерогенности
Изучение ваших
результатов
Слайд 9
Фиксированные эффекты против случайных эффектов
Две модели для мета-анализа
доступны в RevMan
Делайте различные предположения о гетерогенности
Предопределите ваш
запланированный подход в протоколе
Слайд 10
Модель фиксированных эффектов
Предполагает, что все исследования измеряют один
и тот же эффект лечения
Оценивает этот один эффект
Если бы не случайная ошибка (выборочное исследование), все результаты были бы идентичны
исследования
Источник: Julian Higgins
Слайд 11
Модель случайных эффектов
Предполагает, что эффект лечения варьирует в
исследованиях
Оценивает среднюю распределения эффектов
Взвешивает обе вариации: внутри исследования
и между исследованиями (tau2, τ2)
Источник: Julian Higgins
Слайд 12
Какая разница?
Мета-анализы случайных эффектов:
Почти идентичны таковым с фиксированными
эффектами, когда нет гетерогенности
Подобны таковым с фиксированными эффектами,
но с более широкими доверительными интервалами, когда гетерогенность типа, предположенной моделью случайных (СЭ) [RE] эффектов
Отличны от мета-анализов постоянных эффектов, когда результаты связаны с размером исследования
Модель СЭ [RE] дает относительно больше веса/значимости более мелким исследованиям
Слайд 13
Отсутствие гетерогенности
Адаптировано из Ohlsson A, Aher SM. Early
erythropoietin for preventing red blood cell transfusion in preterm
and/or low birth weight infants. Cochrane Database of Systematic Reviews 2006, Issue 3.
Fixed
Random
Слайд 14
Немного гетерогенности
Adapted from Adams CE, Awad G,
Rathbone J, Thornley B. Chlorpromazine versus placebo for schizophrenia.
Cochrane Database of Systematic Reviews 2007, Issue 2.
Fixed
Random
Слайд 15
Adapted from Li J, Zhang Q, Zhang M,
Egger M. Intravenous magnesium for acute myocardial infarction. Cochrane
Database of Systematic Reviews 2007, Issue 2.
Эффекты малых исследований
Fixed
Random
Слайд 16
Что выбрать?
Планируйте свой способ на стадии протокола
Ожидаете ли
вы, что ваши результаты будут очень разнообразны?
Рассмотрите предположения, лежащие
в основе моделей
Фиксированного эффекта
Может быть нереалистичным – игнорирует гетерогенность
Случайных эффектов
Допускает гетерогенность
Оценка распределения исследований может быть неточной, если существуют смещения, мало исследований или мало событий
Слайд 17
План
Что такое гетерогенность?
Предположения о гетерогенности
Выявление гетерогенности
Изучение ваших
результатов
Слайд 18
Выявление гетерогенности
Визуальная проверка лесовидных диаграмм
Хи - квадрат
(χ2) тест (Q тест)
I2 статистика для вычисления гетерогенности
Слайд 20
Тест хи- квадрат (χ2)
Проверяет нулевую гипотезу гомогенности
Более низкая мощность с меньшим числом исследований
Может определить
клинически незначимые различия при множестве исследований
Узкий вопрос (да/нет) бесполезен, если гетерогенность неминуема
вычисляется автоматически RevMan’ом
Слайд 21
I2 статистика
I2 описывает процент вариабельности, определяющейся в большей
степени гетерогенностью, чем вероятностью (случайностью) (0% до 100%)
Низкие значения
обозначают отсутствие или небольшую гетерогенность
Высокие значения обозначают много гетерогенности
вычисляется автоматически RevMan’ом
Будьте осторожны при интерпретации
Слайд 23
chi2 = 29.55 df = 13 P =
0.0055
chi2 = 6.14 df = 3 P = 0.11
I2
= 56%
I2 = 51%
Source: Julian Higgins
Слайд 24
Что делать с гетерогенностью
Проверьте правильность данных
Рассмотрите в
своей интерпретации
Особенно если направление эффектов различается
Если гетерогенность очень
высокая
Интерпретируйте результаты фиксированных эффектов с осторожностью
Рассмотрите анализ чувствительности – внесли бы случайные эффекты значительную разницу?
Можете не проводить мета-анализ
Средний результат может быть бессмысленным на практике
Рассмотрите клиническую и методологическую сравнимость исследований
Избегайте
Изменения ваших мер эффектов или моделей анализа
Исключения выбивающихся исследований
Исследуйте гетерогенность
Слайд 25
План
Что такое гетерогенность?
Предположения о гетерогенности
Выявление гетерогенности
Изучение ваших
результатов
Слайд 26
Изучение ваших результатов
Какие факторы, как оказывается, модифицируют
эффект?
Клиническое разнообразие (популяция, вмешательства, исходы)
методологическое разнообразие (дизайн эксперимента,
риск смещений)
Планируйте свою стратегию в своем протоколе
Определите ограниченное число важных факторов, которые будете исследовать
Имейте научное обоснование для каждого выбранного фактора
Декларируйте любые апостериорные исследования
Слайд 27
Доступны два метода
Анализ по подгруппам
Группируйте исследования по
предопределенным факторам
Ищите различия в результатах и гетерогенность
Мета-регрессия
Проверьте взаимодействие между категориальными и непрерывными переменными
Не доступно в RevMan’е
Слайд 28
Соблюдайте осторожность
Результаты наблюдения (обсервационные), а не из рандомизированных
исследований
Настороженно относитесь к множественным и апостериорным сравнениям
Может быть
бесполезным при небольшом числе исследований
Можете не справиться с анализом агрегированных данных
Ищите вмешивающиеся факторы
Следуйте плану, точно указанному в протоколе, не уделяя особого внимания отдельным находкам
Результаты редко однозначны
Слайд 29
Интерпретация анализа по подгруппам
Рассмотрите результаты и гетерогенность в
подгруппах
Действительно ли подгруппы разные?
Если только 2 подгруппы –
перекрываются ли доверительные интервалы?
Статистические тесты подгрупповых различий
Можете быть более уверены:
Предварительный анализ
Анализ внутри исследования
Эффект клинически правдоподобен и подтверждается косвенными доказательствами
Эффект клинически значим и изменит рекомендации
Слайд 30
Подгруппы участников
Based on Stead LF, Perera R, Bullen
C, Mant D, Lancaster T. Nicotine replacement therapy for
smoking cessation. Cochrane Database of Systematic Reviews 2008, Issue 1. Art. No.: CD000146. DOI: 10.1002/14651858.CD000146.pub3.
Слайд 31
Подгруппы вмешательств
Based on Linde K, Berner MM, Kriston
L. St John's wort for major depression. Cochrane Database
of Systematic Reviews 2008, Issue 4. Art. No.: CD000448. DOI: 10.1002/14651858.CD000448.pub3.
Слайд 32
Анализ чувствительности
Не то же самое, что и анализ
по подгруппам
Проверяет влияние решений, принятых в ходе обзора
Включение
исследований в обзор
Определение низкого риска смещений
Выбор меры эффекта
Предположения об отсутствующих данных
Пороговая точка для дихотомической ранговой шкалы
Корреляционные коэффициенты
Повторите анализ, используя альтернативный метод или предположение
Не представляйте множество лесовидных диаграмм – представьте только результаты
Если разница минимальна, можете быть более уверены в выводах
Если разница большая, интерпретируйте результаты с осторожностью
Слайд 33
Что включить в ваш протокол
Оценка гетерогенности
Оценку сравнимости
исследований до мета-анализа
Визуальную проверку и использование таких методов
статистики как I2
Синтез данных
Модель фиксированных эффектов и случайных эффектов (или обе)
Анализы по подгруппам и изучение гетерогенности
Запланированные анализы в подгруппах
Любые другие стратегии для изучения гетерогенности
Слайд 35
Мысль, чтобы взять с собой домой
Статистическая гетерогенность –
это наличие различий между оцененными эффектами вмешательств, в большей
степени, чем ожидалось в связи со случайной вариацией (выборочного исследования) самой по себе
Она может быть вызвана клиническим и методологическим разнообразием
Модели фиксированных и случайных эффектов делают разные предположения о гетерогенности
Изучайте любую гетерогенность, которую вы найдете
