Определите вопрос Определите вопрос Спланируйте критерии приемлемости доказательств Спланируйте методы Проведите поиск исследований Примените критерии приемлемости Соберите данные Оцените исследования на предмет риска смещения Проанализируйте и представьте результаты Интерпретируйте результаты и сформулируйте выводы Улучшайте и обновляйте обзор
Что такое гетерогенность? Что такое гетерогенность? Предположения о гетерогенности Выявление гетерогенности Изучение ваших результатов
Вариация или различия Вариация или различия
участники участники Например, условия, возраст, пол, месторасположение, критерии приемлемости исследования, вмешательства интенсивность/доза, длительность, доставка (лекарства), дополнительные компоненты, опыт практикующих врачей, контроль (плацебо, ничего, стандартный уход) исходы длительность периода наблюдения, способы измерения, определение события, пороговые точки
Дизайн исследования Дизайн исследования Например, рандомизированное против нерандомизированного, перекрестное против параллельного, индивидуальное против кластер- рандомизированного Проведение Например, риск смещения (сокрытие распределения, ослепление, и т.д.), подход к анализу
Всегда будет случайная (выборка) вариация между результатами разных исследований Всегда будет случайная (выборка) вариация между результатами разных исследований Гетерогенность является вариацией между эффектами, которые измеряют, в различных исследованиях Вызвана клиническим и методологическим разнообразием Альтернатива гомогенности (идентичные истинные эффекты, лежащие в основе каждого исследования) Результаты исследований будут более отличны друг от друга, чем если бы случайная вариация была единственной причиной для различий между оцененными эффектами вмешательства
Что такое гетерогенность? Что такое гетерогенность? Предположения о гетерогенности Выявление гетерогенности Изучение ваших результатов
Две модели для мета-анализа доступны в RevMan Две модели для мета-анализа доступны в RevMan Делайте различные предположения о гетерогенности Предопределите ваш запланированный подход в протоколе
Предполагает, что все исследования измеряют один и тот же эффект лечения Предполагает, что все исследования измеряют один и тот же эффект лечения Оценивает этот один эффект Если бы не случайная ошибка (выборочное исследование), все результаты были бы идентичны
Мета-анализы случайных эффектов: Мета-анализы случайных эффектов: Почти идентичны таковым с фиксированными эффектами, когда нет гетерогенности Подобны таковым с фиксированными эффектами, но с более широкими доверительными интервалами, когда гетерогенность типа, предположенной моделью случайных (СЭ) [RE] эффектов Отличны от мета-анализов постоянных эффектов, когда результаты связаны с размером исследования Модель СЭ [RE] дает относительно больше веса/значимости более мелким исследованиям
Планируйте свой способ на стадии протокола Планируйте свой способ на стадии протокола Ожидаете ли вы, что ваши результаты будут очень разнообразны? Рассмотрите предположения, лежащие в основе моделей Фиксированного эффекта Может быть нереалистичным – игнорирует гетерогенность Случайных эффектов Допускает гетерогенность Оценка распределения исследований может быть неточной, если существуют смещения, мало исследований или мало событий
Что такое гетерогенность? Что такое гетерогенность? Предположения о гетерогенности Выявление гетерогенности Изучение ваших результатов
Визуальная проверка лесовидных диаграмм Визуальная проверка лесовидных диаграмм Хи - квадрат ( 2) тест (Q тест) I2 статистика для вычисления гетерогенности
Проверяет нулевую гипотезу гомогенности Проверяет нулевую гипотезу гомогенности Более низкая мощность с меньшим числом исследований Может определить клинически незначимые различия при множестве исследований Узкий вопрос (да/нет) бесполезен, если гетерогенность неминуема вычисляется автоматически RevMan’ом
I2 описывает процент вариабельности, определяющейся в большей степени гетерогенностью, чем вероятностью (случайностью) (0% до 100%) I2 описывает процент вариабельности, определяющейся в большей степени гетерогенностью, чем вероятностью (случайностью) (0% до 100%) Низкие значения обозначают отсутствие или небольшую гетерогенность Высокие значения обозначают много гетерогенности вычисляется автоматически RevMan’ом Будьте осторожны при интерпретации
Проверьте правильность данных Проверьте правильность данных Рассмотрите в своей интерпретации Особенно если направление эффектов различается Если гетерогенность очень высокая Интерпретируйте результаты фиксированных эффектов с осторожностью Рассмотрите анализ чувствительности – внесли бы случайные эффекты значительную разницу? Можете не проводить мета-анализ Средний результат может быть бессмысленным на практике Рассмотрите клиническую и методологическую сравнимость исследований Избегайте Изменения ваших мер эффектов или моделей анализа Исключения выбивающихся исследований Исследуйте гетерогенность
Что такое гетерогенность? Что такое гетерогенность? Предположения о гетерогенности Выявление гетерогенности Изучение ваших результатов
Какие факторы, как оказывается, модифицируют эффект? Какие факторы, как оказывается, модифицируют эффект? Клиническое разнообразие (популяция, вмешательства, исходы) методологическое разнообразие (дизайн эксперимента, риск смещений) Планируйте свою стратегию в своем протоколе Определите ограниченное число важных факторов, которые будете исследовать Имейте научное обоснование для каждого выбранного фактора Декларируйте любые апостериорные исследования
Анализ по подгруппам Анализ по подгруппам Группируйте исследования по предопределенным факторам Ищите различия в результатах и гетерогенность Мета-регрессия Проверьте взаимодействие между категориальными и непрерывными переменными Не доступно в RevMan’е
Результаты наблюдения (обсервационные), а не из рандомизированных исследований Результаты наблюдения (обсервационные), а не из рандомизированных исследований Настороженно относитесь к множественным и апостериорным сравнениям Может быть бесполезным при небольшом числе исследований Можете не справиться с анализом агрегированных данных Ищите вмешивающиеся факторы Следуйте плану, точно указанному в протоколе, не уделяя особого внимания отдельным находкам
Рассмотрите результаты и гетерогенность в подгруппах Рассмотрите результаты и гетерогенность в подгруппах Действительно ли подгруппы разные? Если только 2 подгруппы – перекрываются ли доверительные интервалы? Статистические тесты подгрупповых различий Можете быть более уверены: Предварительный анализ Анализ внутри исследования Эффект клинически правдоподобен и подтверждается косвенными доказательствами Эффект клинически значим и изменит рекомендации
Based on Stead LF, Perera R, Bullen C, Mant D, Lancaster T. Nicotine replacement therapy for smoking cessation. Cochrane Database of Systematic Reviews 2008, Issue 1. Art. No.: CD000146. DOI: 10.1002/14651858.CD000146.pub3. Based on Stead LF, Perera R, Bullen C, Mant D, Lancaster T. Nicotine replacement therapy for smoking cessation. Cochrane Database of Systematic Reviews 2008, Issue 1. Art. No.: CD000146. DOI: 10.1002/14651858.CD000146.pub3.
Based on Linde K, Berner MM, Kriston L. St John's wort for major depression. Cochrane Database of Systematic Reviews 2008, Issue 4. Art. No.: CD000448. DOI: 10.1002/14651858.CD000448.pub3. Based on Linde K, Berner MM, Kriston L. St John's wort for major depression. Cochrane Database of Systematic Reviews 2008, Issue 4. Art. No.: CD000448. DOI: 10.1002/14651858.CD000448.pub3.
Не то же самое, что и анализ по подгруппам Не то же самое, что и анализ по подгруппам Проверяет влияние решений, принятых в ходе обзора Включение исследований в обзор Определение низкого риска смещений Выбор меры эффекта Предположения об отсутствующих данных Пороговая точка для дихотомической ранговой шкалы Корреляционные коэффициенты Повторите анализ, используя альтернативный метод или предположение Не представляйте множество лесовидных диаграмм – представьте только результаты Если разница минимальна, можете быть более уверены в выводах Если разница большая, интерпретируйте результаты с осторожностью
Оценка гетерогенности Оценка гетерогенности Оценку сравнимости исследований до мета-анализа Визуальную проверку и использование таких методов статистики как I2 Синтез данных Модель фиксированных эффектов и случайных эффектов (или обе) Анализы по подгруппам и изучение гетерогенности Запланированные анализы в подгруппах Любые другие стратегии для изучения гетерогенности
Статистическая гетерогенность – это наличие различий между оцененными эффектами вмешательств, в большей степени, чем ожидалось в связи со случайной вариацией (выборочного исследования) самой по себе Статистическая гетерогенность – это наличие различий между оцененными эффектами вмешательств, в большей степени, чем ожидалось в связи со случайной вариацией (выборочного исследования) самой по себе Она может быть вызвана клиническим и методологическим разнообразием Модели фиксированных и случайных эффектов делают разные предположения о гетерогенности Изучайте любую гетерогенность, которую вы найдете
Deeks JJ, Higgins JPT, Altman DG (editors). Chapter 9: Analysing data and undertaking meta-analyses. In: Higgins JPT, Green S (editors). Cochrane Handbook for Systematic Reviews of Interventions Version 5.1.0 [updated March 2011]. The Cochrane Collaboration, 2011. Available from www.cochrane-handbook.org. Deeks JJ, Higgins JPT, Altman DG (editors). Chapter 9: Analysing data and undertaking meta-analyses. In: Higgins JPT, Green S (editors). Cochrane Handbook for Systematic Reviews of Interventions Version 5.1.0 [updated March 2011]. The Cochrane Collaboration, 2011. Available from www.cochrane-handbook.org.