green_fr: (Default)
green_fr ([personal profile] green_fr) wrote2021-10-12 01:23 pm
Entry tags:

Ещё об эффективности вакцины

Мои выкладки по поводу эффективности вакцины были сделаны реально «на коленке» — они давали общее представление об эффективности, не учитывая возможной разницы между популяциями вакцинированных и невакцинированных. На днях Le Monde рассказал об исследовании, которое разобралось и с этим фактором (заодно это и самое большое в мире исследование — изучали истории 22.6 миллионов человек, к сожалению только 50+ лет). Изначально сравнивали похожие профили, а затем ещё и почистили результаты, чтобы исключить влияние посторонних факторов (например, того, что прививались скорее здоровые люди, тогда как больные зачастую опасались прививаться).

Результат, очевиден. Ну или скажем так, если бы результат был каким бы то ни было другим, об этом написали бы все газеты. А приходящие вовремя поезда неинтересны никому. Тем не менее: все 3 исследованные вакцины (Pfizer-bioNtech, Moderna и AstraZeneca) снижают примерно в 10 раз вероятность серьёзно заболеть (=попасть в больницу во Франции). Что самое смешное, эффективность самого популярного (в прямом смысле — все хотят) Pfizer в итоге самая низкая из трёх, пусть и ненамного. Аналогично снижается вероятностью умереть.

Второй результат чуть менее очевиден — эффект вакцины держится примерно на том же уровне через 5 месяцев после вакцинации. Срок 5 месяцев не потому, что потом всё плохо, а потому что данных было только на 5 месяцев — что дальше, пока никто не знает. С одной стороны, цитируют американское исследование, вроде как показывающее аналогичный эффект на 6 месяцах (в США начали вакцинировать чуть раньше). С другой — израильское исследование третьей дозы, которая вроде как улучшает защиту, но сравнивать с первыми двумя исследованиями сложно, потому что там очень короткий промежуток наблюдения после третьей дозы.


Друзья, в прошлый раз мне совсем было грустно читать комментарии. Давайте писать по существу? Меня в этой теме интересует исключительно математическое исследование вопроса. Нажива биг фармы, всемирный заговор, а также сам факт существования или нет вируса — меня не интересуют. Да даже и будущее человечества или демократии тоже меня не интересует в рамках этого поста, поскольку оно никак не следует из описанного исследования.

Второе: прежде чем нажимать на кнопку Send, перечитайте свой комментарий. Всё ли в нём будет понятно вашему собеседнику без дополнительных вопросов к вам? Если нет — затрудните себя, напишите сразу. Меня не интересует повышение количества комментариев к этому посту / рейтинга этого журнала, меня интересуют связная речь и интересные собеседники. Если они со мной не согласны — это даже лучше. Но выражающие несогласие связно и понятно :-) Либо задающие вопросы (аналогичным образом).

[identity profile] green-fr.livejournal.com 2021-10-13 06:30 pm (UTC)(link)
Авторы по ссылке в посте :-)
А в чём проблема выбора равных пар? Ты заранее определяешь параметры, а потом подбираешь пары, чтобы все значения параметров внутри пары были одинаковы.

[identity profile] kalvado.livejournal.com 2021-10-13 08:30 pm (UTC)(link)
ну хотя бы потому, что — как @парижанка указывает — когорты получились в итоге явно сдвинутые.
Я не могу прочитать текст сплошняком, понятно, поэтому могу и ошибаться. НО.

Подбирали не так много параметров — пол, возраст, регион; и дома престарелых (почему их не выделить вообще, к слову?). Точной подгонки в парах нет. При том обьеме данных можно было сделать вполне достойные по обьему группы сопоставимых по бОльшему числу параметров.

В итоге, например, среди невакцинированных много больше людей со слабым здоровьем. Их как в пары ставили — с учетом или нет? Видимо нет. И значит невакцинированные получили гандикап с этой стороны.
То есть есть изначальная неоднородность кто привился, и тогда надо фильтровать и выравнивать, (чего видимо не сделали), либо получается перекос в нужную сторону который устраивает.
Это все может и не криминал в каждой конкретной строке, перекосы не очень велики и разнонаправленны, но в комплексе создает ощущение что хотят сказать все, кроме главного.
То есть, повторюсь, другой возможный подход — фиксированные когорты, которые формируются изначально; возможно зная вакцинируется ли человек в конце концов — и нормировка. Это ИМНО честнее и логичнее.

ПС. Таблицы явно не пересматривали. Куча опечаток "11" вместо "1". Опять таки не криминал, если не предполагать что логичнее было бы использовать одинаковые формулы в клетках... Мелочь — но опять таки...

[identity profile] parizanka.livejournal.com 2021-10-13 08:57 pm (UTC)(link)
подтверждаю, что пары подбирали по полу, возрасту (один и тот же год рождения), региону проживания и домам престарелых. это все.

состояние здоровья при поставлении в пару- не учитывалось. и конечно, не учитывались признанные уже на сегодня факторы риска тяжелого течения ковида: диабет, ожирение и тд.

[identity profile] green-fr.livejournal.com 2021-10-14 05:48 am (UTC)(link)
Я вижу, как она "указывает", но не вижу, как она "показывает" — ты понимаешь, за счёт чего когорты получаются "сдвинутыми"?

Про здоровье — почему тебе показалось, что пары составляли без учёта слабого здоровья? А то все остальные выводы из этого следуют.

[identity profile] kalvado.livejournal.com 2021-10-14 06:11 am (UTC)(link)
Почему мне показалось что пары составляются без учёта — потому что в тексте написан алгоритм составления пар по 4 признакам. По крайней мере гугл так перевел. У тебя есть аргументы что это не так?
Почему когорты сдвинутые — так народишко такой попался. Какой есть уж. И либо нам надо убирать этот эффект, либо конечный вывод можно упростить до "лучше быть богатым и здоровым чем бедным и больным"

[identity profile] green-fr.livejournal.com 2021-10-14 06:45 am (UTC)(link)
Да, действительно, ты прав, пары составлялись без этого фактора. Он учитывался чуть позже, в следующем параграфе, §2.2.

[identity profile] kalvado.livejournal.com 2021-10-14 11:23 am (UTC)(link)
Ну дойду до компа — гляну. Но таки речь чуть о другом аспекте:
Стандартные методики хороши тем, что в них уже выловлены баги. Их описания понятны без дополнительных разборок.

Тут мы должны тратить силы рассматривая всякие левые сценарии. Как повлияет на результат если невак3 умрет от ковида,не будучи в паре? Как повлияет смерть не от ковида?

Ну и самый злой вопрос — а что именно хотели спрятать авторы заставляя нас анализировать методику вместо анализа результата? Это уже абсолютно личное и необоснованное мнение. Но вот как-то так.

[identity profile] green-fr.livejournal.com 2021-10-14 12:31 pm (UTC)(link)
А ты вот настолько в теме, что готов утверждать, что эта методика такая вот революционная, как ты говоришь? Я просто, не смотря на работу актуарием, совсем никогда не занимался ни демографией, ни медицинскими исследованиями, ни даже исследованиями смертности.

Ты видишь, чем я тут занимаюсь? Я не оправдываю методику, я не оправдываю результаты. Я задаю тебе и [livejournal.com profile] parizanka вопрос: что именно заставляет вас думать, что что-то не так? Чтобы как минимум самому понять, где именно у вас реальная критика.

Вот здесь, прости, критики не вижу. Вижу утверждения "стандартные методики" и "левые сценарии", как будто ты реально специалист в вопросе, как минимум на уровне эти ребят, которые опубликовались. "Что именно хотели спрятать авторы" — камон, ты серьёзно? Давно перестал пить коньяк по утрам? Это же именно та постановка вопроса, которая показывает, что ответ уже есть.

Может быть авторы и облажались. Но мне для этого, наверное, нужны какие-то аргументы. А не просто слова. Или даже предчувствия (исследование слишком выгодно N — значит оно неверно!)

[identity profile] kalvado.livejournal.com 2021-10-14 01:49 pm (UTC)(link)
Да не, у нас нормальный спор физтехов за тему, прям долгоповским сортиром потянуло =)

Я тебе приведу немного другой пример, который Парижанка тут упомянула.
DREES опубликовал некую работу, где пришел к выводу об эффективности вакцины. Маленькая проблема — цифры смертности в работе отличались от официальной статистики примерно вдвое.
Тут вот некая защита: https://news.in-24.com/coronavirus/173373.html

Там конкретно разобрано где как и почему образовалась разница. Но я спрошу с точки зрения законов сохранения:
есть накие глобальные цифры, которые должны сохраняться. Например, средняя вероятность заболевшему ковидом не выйти из больницы живым. И где-то как-то эта цифра должна получаться одной и той же.
Если разные методы дают оценку вдвое отличающуюся — то кто-то ошибается. И из текста оправданийу меня создается впечатление, что оценка DREES неверна. Возможно в рамках методики они и правы — но это только значит что методика кривая.
Тут я не могу прочитать полностью текст, моя критика на маленьких кусочках. о методике пар я не слышал. И не думаю что она сильно распространена — хотя бы потому, что требует специфически точной базы данных, которых у эпидемиологов рньше не было — ты сам сказал что это отдельно разрешение на синтез данных разных баз. Там есть ссылка на методологию? Мне лень копать, сколько среди авторов data scientists и статистиков, а сколько эпидемиологов?

А основная моя тема, уж извини — я только помяну, и обещаю что не буду развивать — это то что цифры этих исследований — это не академические забавы, а цифры на основе которых принимаются решения. И это надо помнить при публикации

[identity profile] parizanka.livejournal.com 2021-10-14 03:12 pm (UTC)(link)
Мне лень копать, сколько среди авторов data scientists и статистиков, а сколько эпидемиологов?

Mahmoud Zureik эпидемиолог
Kim Bouillon эпидемиолог
Bérangère Baricault статистик
Jérémie Botton эпидемиолог
Marie-Joëlle Jabagi эпидемиолог
Marion Bertrand (не нашла)
Laura Semenzato статистик
Stéphane Le Vu эпидемиолог
Jérôme Drouin data manager
Rosemary Dray-Spira эпидемиолог
Alain Weill эпидемиолог

[identity profile] kalvado.livejournal.com 2021-10-14 03:23 pm (UTC)(link)
с одной стороны неплохо, хуже когда 5 врачей с 5 баллами по статистике в дипломах на всех; с другой- понятно, что это не команда разработки новых методик анализа данных.

[identity profile] parizanka.livejournal.com 2021-10-17 07:35 am (UTC)(link)
директор этого исследования активно ведет твиттер (@MahmoudZureik). Ему там многие стали задавать конкретные вопросы по результатам и методологии (мне понравился вопрос, откуда они взяли во Франции 3,6 млн невакцинированных в когорте 75+, если к 21/07 в вакцинированы были уже 75-90% людей 75+).

Он отвечает, ДОСЛОВНО: "все объяснено в исследовании. А если вы не поняли, значит, вы не компетентны". (!!!)

[identity profile] kalvado.livejournal.com 2021-10-17 05:40 pm (UTC)(link)
В свое время американская почта явно пригласила спецов почты России. Теперь видимо Росстат делится кадрами.

[identity profile] parizanka.livejournal.com 2021-10-18 02:33 pm (UTC)(link)
Делится очень успешно, кадры Росстата уже, видно, себя проявили. Так на найте правительства по Парижу доля привитого населения 18+ лет уже .....103,09%. Это пока еще не 146% конечно, но надо же с чего то начинать.

https://www.gouvernement.fr/info-coronavirus/vaccins

Edited 2021-10-18 14:35 (UTC)

[identity profile] kalvado.livejournal.com 2021-10-18 02:35 pm (UTC)(link)
Ну кстати во Флориде уже за 200 — но по вполне понятной причине: туда старички пенсионеры на зиму перебираются. Там их и кололи. А живут они формально где работали, на севере.
Так что кто его знает, какие там выверты учета?

[identity profile] green-fr.livejournal.com 2021-10-20 09:39 am (UTC)(link)
Так а кого в этой веточке это интересует? Это же так, поржать чисто. Ну и потом ссылаться — вон, цифры явно подделаны, а значит и вакцина ненастоящая. Если не сам ковид.
Не получилось у меня и в этот раз не скатиться в откровенную желтуху :-/

[identity profile] kalvado.livejournal.com 2021-10-20 12:05 pm (UTC)(link)
Где желтуха? Есть оценка текста со вполне конкретными претензиями. Если эта оценка не совпадает с чьим-то видением мира, это не делает такую оценку желтизной.
С точки зрения обычной порядочности, странные публичные утверждения должны разьясняться. Если разъяснения сводятся к "вы не компетентны" — вполне логичный ответ "нет, это вы некомпетентны"

[identity profile] kalvado.livejournal.com 2021-10-13 08:31 pm (UTC)(link)
и да, авторов не видел. Там по ссылкам много непонятных словов каких-то....