Как читать исследования психотерапии
Короткий путеводитель по цифрам и заголовкам: на что смотреть, когда вам обещают «85% улучшений».
Цифра на баннере и вопрос под ней
«85% клиентов отмечают улучшение!» — такие заявления встречаются на многих сайтах, посвящённых психотерапии. Звучит убедительно, но поводов для вопросов здесь много. Кто эти клиенты? Сколько их было? Сравнивали ли их с кем-то? Кто оценивал улучшение — они сами или независимые эксперты? Через какое время? И что означает «улучшение»: что человек стал чувствовать себя немного лучше, что исчезли симптомы или что ему просто понравилось общаться?
Это не придирки. Без ответов на такие вопросы цифра вообще ничего не сообщает. Хорошая новость в том, что научиться задавать их нетрудно, а привычка к ним защищает от многих красивых, но пустых обещаний.
Прежде чем смотреть на результаты, поинтересуйтесь, какую задачу решали исследователи. Они хотели оценить, нравится ли клиентам терапия? Или как изменились симптомы за двенадцать недель? Или чем один подход лучше другого? Или сохраняется ли эффект через год? Всё это разные вопросы, и ответ на один не заменяет ответа на другой.
Высокие оценки удовлетворённости, например, показывают, что люди довольны услугой, но ничего не говорят о том, уменьшились ли у них тревога или подавленность. Описание отдельного удачного случая помогает сформулировать гипотезу, но не показывает, как будет в большой группе. Каждый тип работы полезен, если не требовать от него большего, чем он может дать.
Кто участвовал, с чем сравнивали и чем измеряли
Число участников, критерии отбора, причины выбывания — не формальности. Результаты небольшой группы очень мотивированных добровольцев сложно переносить на всех людей с разными проблемами. Важно, была ли контрольная группа и что в ней происходило: ничего, ожидание очереди, другой вид терапии? Сопоставимы ли группы по возрасту, тяжести состояния, другим характеристикам?
Если сравнения нет, улучшение может иметь множество объяснений: время, изменения в жизни, поддержка близких, просто ожидание, что станет лучше. Это не означает, что люди не изменились, но не позволяет уверенно сказать, что причиной стала терапия.
Ещё один важный вопрос: чем измеряли результат. В исследованиях используют опросники самочувствия, клинические интервью, оценку со стороны, наблюдения за поведением. Каждый инструмент имеет сильные и слабые стороны. Опросник, составленный авторами на коленке и не проверенный на надёжность, может дать красивую диаграмму, но плохо отражать реальные изменения. Хорошая статья указывает, как собирали данные, сколько участников выбыло и как учитывали возможные побочные эффекты.
Не забывайте и про выражение «статистически значимо». Оно не равно «практически важно». В большой выборке крошечное различие может быть значимым, а в маленькой — заметный эффект остаться неопределённым. Поэтому стоит смотреть не только на значимость, но и на величину эффекта, доверительные интервалы и срок наблюдения. Улучшение, измеренное сразу после курса, не гарантирует результата через полгода.
Как не поверить в «лучший метод» и что отличает надёжную работу
Заявление «наш подход эффективнее других» требует особенно строгой проверки. Нужны прямые сравнения в сопоставимых условиях, и желательно в нескольких независимых исследованиях. Одна работа редко убеждает. Лучше искать систематические обзоры и метаанализы по конкретной проблеме и смотреть, какие именно подходы в них представлены.
Если исследование посвящено гуманистическим методам в целом, нельзя приписывать каждый найденный эффект именно гештальт-терапии. Если оно проведено на студентах с лёгкой тревожностью, не стоит делать вывод о тяжёлой депрессии. А если финансировала его организация, заинтересованная в положительном результате, об этом полезно знать, хотя само по себе это ничего не отменяет.
Напоследок о том, что отличает надёжную работу. Надёжная научная статья не прячет слабые места: небольшой размер выборки, невозможность скрыть от участников, какую терапию они получают, потери при последующем наблюдении. Это не повод отвергать работу, а способ понять, где проходят границы её выводов. Авторам, которые открыто пишут об ограничениях, обычно можно доверять больше, чем тем, кто обещает безупречный результат.
Для читателя это означает простую вещь: привыкайте воспринимать честную неопределённость как нормальную часть науки. Психологическая помощь касается живых людей, и точность здесь важнее эффектных формулировок. Если вам трудно оценить исследование самому, обсудите его с психологом или врачом, которому доверяете.