MamaLift Plus против собственной имитации: что сообщает статья и что зафиксировано в реестре

Американская компания провела для своего приложения при послеродовой депрессии полноценное исследование с имитационным контролем и получила широкий разрыв по первичной конечной точке. В собственном заявлении о конфликте интересов авторы сообщают: Curio Digital Therapeutics разработала MamaLift Plus и финансировала это исследование, а все четверо авторов – её сотрудники. Само по себе это не делает результат неверным, и контроль здесь сделан лучше, чем в большинстве работ этой области. Но структурные вопросы приобретают больший вес, чем обычно. По нескольким из них статья и её собственная запись в реестре расходятся.

Как устроена работа

Исследование было полностью дистанционным и проводилось в США; участницы распределились по стране, наибольшие доли пришлись на Техас, Калифорнию, Нью-Йорк, Флориду и Нью-Джерси. Набор шёл только через платную рекламу в социальных сетях компании Meta с 18 апреля по 24 мая 2023 года, причём объявления прямо описывали оплачиваемое исследование; завершившие все процедуры получали подарочный сертификат на 100 долларов США. Из 2 177 человек, прошедших оценку соответствия, рандомизирована 141 участница в соотношении 2 к 1: 95 в группу MamaLift Plus и 46 в группу имитации.

Условия включения были жёстче, чем можно заключить из краткого описания. Сначала 13–19 баллов по Эдинбургской шкале при скрининге, то есть лёгкая или умеренная выраженность симптомов. Затем встреча с лицензированным специалистом в области психического здоровья, который проводил диагностическое клиническое интервью по критериям DSM-5 и заполнял шкалу Гамильтона (HAMD-17); к участию допускались только набравшие от 8 до 23 баллов. Женщины с ранее установленным тяжёлым психическим расстройством в исследование не включались, как и участницы предшествующих работ той же компании.

Контроль не был листом ожидания. Имитационное приложение воспроизводило внешний вид, цветовое решение и набор функций исследуемого продукта, содержало общие материалы для женщин в послеродовом периоде, а обе группы считали, что пользуются одним и тем же приложением исследования. Отсутствовало в нём только психотерапевтическое содержание. По первичной конечной точке – улучшение не менее чем на 4 балла по Эдинбургской шкале к 8-й неделе – ответ зарегистрирован у 86,3 % (82 из 95) в основной группе против 23,9 % (11 из 46) в группе имитации, p < 0,0001. Среднее улучшение составило 8,34 балла против 1,89. По вторичной конечной точке, снижению ниже 13 баллов по той же шкале, получено 83,2 % против 32,6 %.

В статье есть и вторая вторичная точка, заявленная заранее и охарактеризованная авторами как вспомогательная: улучшение по шкале Гамильтона к концу лечения в оценке врача. Данных по ней почти нет, и причину авторы называют сами: «предполагалось собрать HAMD-17 в конце лечения у всех участниц, однако большинство вышли из исследования прежде, чем эту процедуру удалось начать». Оценка существует для 43 из 141 рандомизированной женщины: 33 в основной группе и 10 в группе имитации; среди них среднее улучшение составило 12,1 балла (СО 5,87) против 9,4 балла (СО 9,52), p = 0,28. Три обстоятельства делают это слабым чтением, а не вторым взглядом на тот же результат. Инструмент иной, чем в первичной точке, и диапазон шкалы иной. Подвыборка определена тем, что женщина дошла до конца лечения. Наконец, исходное значение HAMD-17 получено на том самом отборочном визите, который решал вопрос о включении, а значит, во внутригрупповое изменение заложена регрессия к среднему. Недостаточной мощностью авторы это сравнение не называют: они пишут, что пропуски «оказали минимальное влияние на результаты» и что «прослеживается тенденция» в пользу продукта. При десяти женщинах в группе имитации значение p = 0,28 не несёт сведений о наличии или отсутствии различий, а различие такой величины на такой выборке не является и тенденцией.

Что зафиксировано в реестре

Запись NCT05958095 стоит открыть рядом со статьёй.

Регистрация ретроспективная. Запись подана 14 июля 2023 года и опубликована 24 июля 2023 года. В ней же фактическим началом исследования указано 1 апреля 2023 года, а фактическим первичным завершением – 24 мая 2023 года. Иными словами, запись внесена после окончания работы. Предварительная регистрация существует затем, чтобы конечные точки были публично закреплены до знакомства с данными; запись, внесённая позже, эту функцию выполнять не может, какими бы ни были причины задержки.

В реестре значатся две первичные точки: доля женщин с улучшением по Эдинбургской шкале не менее чем на 4 балла и доля женщин со снижением ниже 13 баллов. Статья сообщает первую как первичную конечную точку, а вторую переводит во вторичные. Здесь достигнуты обе, и вывод от этого не меняется, однако перевод равноправной первичной точки во вторичные – изменение основного анализа, и статья на него не указывает.

Маскирование в реестре обозначено как одностороннее: ослеплены только участницы. Статья и в резюме, и в разделе методов описывает работу как двойную слепую.

Шкала Гамильтона в реестре не упоминается ни разу. У точки, которую статья заявляет как вторую вторичную и которую оценивает врач, соответствия в реестре нет.

Ещё одно уточнение, касающееся описания. Ведущим спонсором в реестре указана Healthcare Innovation Technology Lab, компания Curio Digital Therapeutics внесена соисполнителем, а ответственной стороной значится главный исследователь из той же лаборатории. Роль Curio, как её формулирует статья, состоит в том, что компания разработала MamaLift Plus и финансировала это исследование. Разработчик и источник финансирования – точное описание, и пользоваться следует именно им.

Что это меняет в практике

Рядом с заголовочной цифрой стоят два структурных обстоятельства. Первое – прямое признание авторов в разделе ограничений: «проверки ослепления не проводилось, а без неё исследователи не могут быть уверены, что участницы контрольной группы не изменили своё поведение, догадавшись о распределении». Имитационное приложение делали неотличимым, но неотличимость была заложена в замысел, а не измерена. Второе – все четверо авторов работают в компании, которая разработала и финансировала продукт, и имеют в ней финансовую долю. Меры предосторожности они описывают: заранее утверждённый план анализа, обезличивание данных на этапе анализа, коды рандомизации на стороне контрактной исследовательской организации, проведение исследования преимущественно вне авторского коллектива.

Что работа действительно показывает – это крупное различие в доле ответивших по самооценочной шкале за восемь недель при лёгкой и умеренной симптоматике, причём против добросовестно сделанного контроля. Скептическое чтение не должно превращать это в ноль. Чего работа не показывает – видно ли это различие врачу, оценивающему тех же пациенток, удержалось ли ослепление и остаётся ли что-либо после 8-й недели. Отсутствие длительного наблюдения авторы называют главным ограничением и сообщают о планах на схемы с наблюдением через 30 и 90 дней.

Поэтому, когда самостоятельное приложение приходит к вам с приложенной долей ответивших, основную работу делают четыре вопроса. Кто заполнял первичную шкалу – пациентка или врач? Проверялась ли сохранность ослепления или она только предполагалась? Совпадает ли запись в реестре с опубликованным отчётом и внесена ли она до появления данных? И через какое время после последнего модуля вообще что-то измеряли?

О месте продукта статья высказывается прямо: MamaLift Plus «предназначен для использования в дополнение к амбулаторной помощи, которую ведёт клиницист», а в реестре обе группы описаны как получающие обычное лечение наряду с приложением. Сопутствующая помощь не прерывалась: приём антидепрессантов отметили 16 из 95 женщин в основной группе и 14 из 46 в группе имитации. Замену недоступной помощи здесь не проверял никто, и предлагать приложение в этом качестве не следует. В дополнение к той помощи, которую женщина уже получает, и при назначенном приёме для повторной оценки за ним стоят восемь недель самоотчётных данных и ничего сверх того.