Проблеми мета-аналізу

Зсув оцінки. Існує декілька причин зсуву оцінок при мета-аналізі. В тому числі, вони пов’язані з прагненнями авторів публікувати позитивні, а не негативні результати. Запропоновано статистичний метод, що дозволяє виявити подібний зсув та виправити його при аналізі. Більше того, при аналізі чутливості сумарної оцінки прийнято враховувати кількість досліджень з негативним результатом (індекс надійності), котрі були б потрібними для попередження будь-якого позитивного результату, що спостерігається. Іншими можливими причинами зсуву можуть бути: незакінченість інформаційного пошуку; невдалі критерії відбору джерел; викладу в оригінальних повідомленнях.

При традиційному описовому аналізі причин для помилок значно більше.

Об’єднання різнорідних досліджень. Критики мета-аналізу вважають, що в ньому «яблука змішуються з апельсинами», а інтерпретація результатів неможлива. Проте грамотно виконаний мета-аналіз далекий від подібних критичних зауважень, оскільки передбачає наявність строгих критеріїв відбору досліджень та ретельний аналіз наявної неоднорідності.

Включення неопублікованих даних. При мета-аналізі автори намагаються виявити всі дослідження в певній області – опубліковані або неопубліковані. Останні можуть бути методологічно слабкими, проте ретельна оцінка якості досліджень перед включенням їх в мета-аналіз усуває цей недолік.

«Золотий стандарт». Таким стандартом зазвичай вважають добре проведене клінічне дослідження, що має адекватний план та розмір вибірки. При наявності декількох схожих досліджень мета-аналіз дозволяє отримати беззаперечні факти. Проблеми виникають при розбіжності результатів одного масштабного та декількох невеликих досліджень. Причини розбіжності необхідно з’ясувати, не піддаючись спокусі орієнтуватися на результати масштабного дослідження. Ретельність необхідна навіть при використанні «золотого стандарту». Не існує «золотого стандарту» на всі випадки життя, він може бути тільки відносний.

Оцінка якості. Запропоновані різні методи оцінки окремих досліджень. Деякі з них виключно складні і передбачають використання більше 30 критеріїв, що робить неоднозначною корисність таких методів. Рекомендують перевіряти залежність оцінки результатів мета-аналізу від якості дослідження. При наявності будь-якої залежності необхідна її інтерпретація.