Официальный почтовый ящик Эксперимента: ai@npcmr.ru
Вопросы по технической интеграции ЕРИС ЕМИАС, а также по и нестабильной работе ЕРИС ЕМИАС: eris@lvlmed.ru
Телефон горячей линии: +7 495 221-39-94

 

ОПУБЛИКОВАНА ЗАПИСЬ ВЕБИНАРА «HOW TO VISUALAIZE 5000 COVID CT SCANS DAILY WITH 15 MINUTES SLA?»
04.06.2020 20:00 GTM +3
Опрос для жителей Москвы с целью определения степени осведомленности и доверия к искусственному интеллекту и его применению в медицинской диагностике

Эксперимент

по использованию инновационных технологий в области компьютерного зрения для анализа медицинских изображений и дальнейшего применения в системе здравоохранения города Москвы

ИИ сервисы для лучевой диагностики Сервисы на основе технологий искусственного интеллекта (ИИ сервисы) для лучевой диагностики

Цель:

Научное исследование возможности использования в системе здравоохранения города Москвы методов поддержки принятия решений на основе результатов анализа данных с применением передовых инновационных технологий

Регион:

Москва, Россия

Платформа:

Единый радиологический информационный сервис (ЕРИС)

Данные на 28 октября 2020

4
направления

КТ ОГК - выявление признаков COVID-19
КТ/НДКТ ОГК - выявление рака легкого
РГ/ФЛГ легких - выявление патологий легких
ММГ - выявление рака молочных желез

12
ИИ сервисов

работает в ЕРИС

875 651
исследований

проанализировано

538
врачей

оценивают результаты ИИ сервисов

Области применения



Онкология
Рак легкого. КТ/НДКТ
С34
Рак молочной железы. ММГ
С50
Образование надпочечников. КТ/НДКТ
D44
Образование в печени. КТ/НДКТ
C22
Кардиология
Кальциноз коронарных артерий. КТ/НДКТ
I25
Аневризма аорты. КТ/НДКТ
I79
Паракардиальный жир. КТ/НДКТ
I27
Расширение легочного ствола. КТ/НДКТ
I25
Хронические заболевания
Перелом позвонков (остеопороз). РГ/КТ/НДКТ
M80
Изменение плотности печени. КТ
K70-K77
Пульмонология
Патология. РГ
J09-J18
Туберкулез. РГ
A15
COVID-19
U07
Неотложные состояния
Переломы конечностей. РГ/КТ
S10-T07
Внутримозговое кровоизлияние. КТ
I60-I64
Переломы черепа. КТ
S10-T07
Неврология
Рассеянный склероз. МРТ
G35
- Текущие
- Планируемые

Как принять участие?

Подготовка к участию

Заполните и отправьте анкету-опросник по электронной почте

Download

Проверьте техническую совместимость вашего ИИ сервиса с ЕРИС (пароль mosmeddata)

SELF TEST

Проверьте требования к качеству ИИ сервиса

QA program

Подайте заявку на участие в эксперименте

Интеграция

Заключите соглашение об участии в Эксперименте


Проверьте технические требования

Рекомендации для подключения поставщиков ИИ-сервисов AGFA DICOM conformance statement Kafka Apache

Выполните интеграцию сервиса с ЕРИС


Откалибруйте сервис на размеченном наборе данных (ретроспективные данные)

Базовые диагностические требования к результатам работы ИИ сервисов
Проспективный анализ исследований

Это основной этап эксперимента

Ваш ИИ сервис обрабатывает исследования в режиме реального времени

Центром диагностики и телемедицины проводятся:

  • Оценка диагностической точности
  • Аудит исследований врачами-экспертами
  • Анализ выявленных расхождений между сервисом и врачами
  • Сбор и анализ обратной связи от врачей

Постоянно ведется выборочный мониторинг технологических дефектов

Выплаты грантов

Через 3 месяца работы (или при достижении минимального количества обработанных исследований) на основном этапе Эксперимента подайте заявку на получение гранта


Объем выплат определяется исходя из количества проанализированных ИИ сервисом исследований


Подавайте заявку на очередную выплату каждые 3 месяца (или при достижении минимального количества обработанных исследований)

Дополнительные материалы

Извещения о заключении соглашений

Вопросы

Порядок и условия проведения эксперимента по использованию инновационных технологий в области компьютерного зрения для анализа медицинских изображений и дальнейшего применения в системе здравоохранения города Москвы (далее – Эксперимент) регламентируются Приказом Департамента здравоохранения города Москвы от 13.10.2020 г. № 1199 (далее - Приказ ) и Постановлением Правительства Москвы от 21 ноября 2019 г.№1543-ПП (в ред. от 28.04.2020 г. № 464-ПП) (далее - Постановление )

1
Кто может принять участие в Эксперименте?

Юридические лица, представляющие сервисы (программное обеспечение) на базе технологий компьютерного зрения, предназначенные для анализа медицинских изображений по следующим видам исследований:

1. Компьютерная томография и низкодозная компьютерная томография грудной клетки с целью выявления рака легких.

2. Маммография с целью выявления рака молочных желез.

3. Рентгенография легких с целью определения патологии легких.

4. Компьютерная томография грудной клетки с целью выявления новой коронавирусной инфекции.

Участник эксперимента не может являться иностранным юридическим лицом, а также российским юридическим лицом в уставном (складочном) капитале которого доля участия иностранных юридических лиц, местом регистрации которых является государство или территория, включенные в утверждаемый Министерством финансов Российской Федерации перечень государств и территорий, предоставляющих льготный налоговый режим налогообложения и (или) не предусматривающих раскрытия и предоставления информации при проведении финансовых операций (офшорные зоны) в отношении таких юридических лиц, в совокупности превышает 50 процентов.

2
Какие документы и куда необходимо предоставить для участия в Эксперименте?

Заявки на участие в Эксперименте принимает Центр диагностики и телемедицины Департамента здравоохранения Москвы по адресу: г. Москва, улица Петровка, дом 24,  каб. 240.
Контактное лицо: Ильина Екатерина Михайловна
Часы приема документов: 9.00-17.30 по МСК.
Заявка подается в произвольной форме, с приложением следующих документов:

1. Информация о регистрации юридического лица на территории РФ.

2. Документы, подтверждающие разработку или право на предоставление предлагаемого Сервиса на основе компьютерного зрения для анализа медицинских изображений и описывающие функции, техническую архитектуру и характеристики (в том числе отчет о предварительных клинико-технических испытаниях Сервиса), предусмотренные сценарии использования Сервиса, требования к программно-аппаратным средствам для работы Сервиса. 

3. Иные документы, которые претендент на участие в Эксперименте полагает необходимым представить, включая результаты ранее проведённой клинической оценки Сервиса.

3
В каком формате должны быть представлены результаты предварительных клинико-технические испытаний?

В соответствии с методическими рекомендациями № 43 предварительные клинико-технические испытания (далее – ПТКИ) проводятся компанией с привлечением научно-исследовательских организаций или медицинских организаций по упрощенной и адаптированной методологии клинических испытаний. Испытания необходимы для получения дополнительной информации о возможностях и ограничениях ПО на основе ИИ.
ПТКИ не являются заменой или аналогом клинических испытаний. Испытания могут включать в себя этапы аналитической валидации и клинической апробации либо состоять только из аналитической валидации. Рекомендуемая форма отчета представлена в приложении 7 МР 43.
С Методическими рекомендациями № 43, включая приложение 7, можно ознакомиться в разделе “Документы”.

4
Кто и в какой момент имеет право подать заявку на получение гранта?

Кто: участники Эксперимента, успешно прошедшие этап технической интеграции с ЕРИС ЕМИАС (Единый радиологический информационный сервис Единой медицинской информационно-аналитической системы города Москвы).

Когда: Заявка подается на основании установленного количества проанализированных изображений при условии обработки минимального количества изображений.

5
Какие документы необходимо предоставить для подачи заявки на получение гранта?

Пакет документов включает в себя:

1. Заявку, оформленную согласно приложению к Приказу (Приложение 4 Приказа).

Обязательные документы:

1. Заверенные копии уставных документов юридического лица.
2. Документы, подтверждающие право на предоставление предлагаемого сервиса на основе компьютерного зрения для анализа медицинских изображений и описывающие функции, техническую архитектуру и характеристики, предусмотренные сценарии использования сервиса, требования к программно-аппаратным средствам для работы.
3. Отчет о предварительных клинико-технических испытаний, выполненных в соответствии с методическими рекомендациями №43 «Клинические испытания программного обеспечения на основе интеллектуальных технологий (лучевая диагностика)» (рекомендованы Экспертным советом по науке Департамента здравоохранения города Москвы, протокол от 25 июня 2019 г. №8) (при условии прохождения указать сведения о месте и дате проведения и приложить копию отчета).

Дополнительные документы:

4. Действующий сертификат соответствия системы менеджмента качества стандарту ISO (при наличии).
5. Заверенные копии государственной сертификации в качестве медицинского изделия (при наличии).
6. Заверенные копии сертификатов соответствия качества предлагаемого сервиса региональным стандартам FDA, CE и их аналогам в других странах (при наличии).
7. Копии научных статей об оценке точности и эффективности предлагаемого сервиса в рецензируемых журналах, индексируемых «Scopus» и/или «Web of Science» (при наличии; указать библиографические ссылки).
8. Оригиналы или копии отчетов о клиническом внедрении или применении предлагаемого сервиса в медицинских организациях Российской Федерации или других стран (при наличии).
9. Длительность апробации предлагаемого сервиса в медицинских организациях Российской Федерации или других стран.
10. Количество и информация о медицинских учреждениях, в которых сервис прошел апробацию.
11. Наличие и качество реализации в предлагаемом сервисе функциональности автоматического анализа медицинских изображений с указанием локализации выявленных сервисом патологических находок и уведомлением о результатах (при наличии также приложить пример в виде скриншота).
12. Наличие и качество реализации в предлагаемом сервисе возможности формирования в результате анализа исследования серии в формате DICOM, которая содержит информацию о наличии или отсутствии патологий, результаты анализа с визуализацией находок на исходных изображениях (при наличии также приложить пример в виде скриншота).
13. Возможность поддержки предлагаемым сервисом стандарта HealthLevel7 (HL 7)/ FHIR.
14. Наличие и качество реализации в предлагаемом сервисе возможности автоматически предоставлять информацию для приоритизации исследований в рабочем списке врача-рентгенолога (при наличии также приложить пример в виде скриншота).
15. Наличие и качество реализации в предлагаемом сервисе функциональности сравнительного анализа исследований одного пациента, выполненных в разное время (оценка динамики патологических процессов) (при наличии также приложить пример в виде скриншота).
16. Наличие и качество реализации в предлагаемом сервисе функциональности автоматической подготовки проекта описания рентгенологического исследования (при наличии также приложить пример в виде скриншота).
17. Длительность анализа одного исследования предлагаемым сервисом.
18. Наличие результатов тестирования диагностической точности предлагаемого сервиса на деперсонализированных медицинских изображений граждан Российской Федерации и/или лиц европеоидной и монголоидной рас.
19. Измеримые критерии диагностической точности предлагаемого сервиса, в том числе классическая ROC-кривая, площадь под кривой (AUC).
20. Измеримые критерии диагностической точности предлагаемого сервиса, в том числе удельный вес ложноотрицательных результатов.
21. Измеримые критерии диагностической точности предлагаемого сервиса, в том числе удельный вес ложноположительных результатов.
22. Измеримые критерии диагностической точности предлагаемого сервиса, в том числе иные показатели диагностической точности согласно методическим рекомендациям №43.
23. Иные документы, которые заявитель полагает необходимым предоставить для получения гранта.

6
Какие требования предъявляются к оформлению заявки на получение гранта?

Требования к заявке изложены в Приложении 4 Приказа № 1199
Заявка и прилагаемые к ней документы должны быть оформлены на русском языке и представлены на бумажном носителе, прошиты, пронумерованы, скреплены подписью уполномоченного лица и печатью соискателя. Исправления и подчистки не допускаются. Если подлинник документа оформлен на иностранном языке, к документу прикладывается его перевод на русском языке, заверенный уполномоченным лицом и печатью соискателя.
Рекомендуется также приложить электронную копию заявки и документов в формате pdf, на usb-носителе.
Копии представленных документов (кроме нотариально заверенных) должны быть заверены подписью уполномоченного лица и печатью претендента на получение гранта.

В случае повторной подачи заявки предоставление первоначального пакета документов по п.3 Приложения 4 Приказа № 1199 не требуется.

Заявка подается с сопроводительным письмом на имя Председателя комиссии Депаратмента здравоохранения города Москвы по рассмотрению заявок юридических лиц, претендующих на получение гранта.

 

7
Кому подается заявка на получение гранта?

Заявка вместе с прилагаемыми к ней документами подается в Департамент здравоохранения города Москвы, где проводится ее регистрация подробнее...

Прием заявок осуществляется по адресу: Оружейный переулок, д. 43, стр.1, 1ый этаж, окно приема корреспонденции.
Режим работы:
Пн, Чт - с 8.00 до 17.00
Пт - с 8.00 до 15.45
Обед - с 12.30 до 13.15
Сб, Вс – выходной

8
Какие сроки и порядок рассмотрения заявки на получение гранта?

Заявки юридических лиц на получение гранта рассматривает комиссия Департамента здравоохранения города Москвы по рассмотрению заявок юридических лиц, претендующих на получение гранта (п. 3.2 и 3.3 Приказа № 1199).
Срок рассмотрения заявки комиссией не превышает 20 календарных дней со дня поступления заявки в комиссию (п.3.1 и п.3.2 Приложения к Постановлению).

9
Как проходит рассмотрение заявок на предоставление гранта?

Рассмотрение заявок проводится в соответствии с п.3 Приложения к Постановлению и п.1,2,3 приложения к Положению о комиссии Департамента здравоохранения города Москвы по рассмотрению заявок юридических лиц, претендующих на получение гранта Приказа № 1199.

По результатам рассмотрения заявок Комиссия формирует сводный список претендентов на получение грантов и заключений (п.3.4 Приложения к Постановлению).

10
Кто принимает решение о предоставлении гранта, какой порядок предоставления гранта?

Согласно п.3.5 Приложения к Постановлению  Департамент на основании принятых комиссией заключений по результатам рассмотрения заявок принимает решение о предоставлении гранта, утверждает правовым актом статус получателя гранта и размеры предоставленных грантов, размещает информацию об этом на официальном сайте Департамента в информационно-телекоммуникационной сети Интернет.

В соответствии с п.3.6 Приложения к Постановлению  предоставление грантов осуществляется Департаментом на основании договора (соглашения) о предоставлении гранта, заключаемого между получателем гранта и Департаментом, предусматривающего в том числе порядок и сроки перечисления грантов.

11
Как определяется размер гранта?

Размер гранта рассчитывается как произведение стоимости единицы анализа одного изображения определенного вида на количество проанализированных изображений.

Расчетная стоимость анализа исследований, необходимая для определения размера гранта:
1. Компьютерная томография и низкодозная компьютерная томография грудной клетки с целью выявления рака легких и/или коронавирусной инфекции (COVID19) - 290 рублей за обработку одного исследования
2. Маммография с целью выявления рака молочных желез - 175 рублей за обработку одного исследования
3. Рентгенография легких с целью определения патологии легких (включая COVID19) - 175 рублей за обработку одного исследования

12
Какое количество исследований предоставляется для обработки в рамках Эксперимента?

В ходе Эксперимента Сервисы суммарно могут обработать следующее количество исследований по видам:

КТ/НДКТ – 121 000 исследований.

11.2. ММГ – 291 000 исследований.

11.3. РГ – 330 000 исследований.

11.4. КТ COVID-19 – 240 000 исследований.

11.5. Минимальное количество исследований в зависимости от их видов, которые предоставляются для обработки Сервису, составляет:

11.5.1. КТ/НДКТ – 4 800 исследований

11.5.2. ММГ – 8 200 исследований.

11.5.3. РГ – 5 500 исследований.

11.5.4. КТ COVID-19 – 4 800 исследований

 

 

Результаты Эксперимента станут основой для национальных стандартов, регламентирующих применение искусственного интеллекта в клинической медицине. Разработка документов ведется в Подкомитете 01 Технического комитета по стандартизации «Искусственный интеллект» (ТК 164). Подробнее о деятельности ПК 01

Чтобы узнать больше или подключиться к работе по стандартизации, напишите в секретариат ПК 01



 

Для получения дополнительной информации или в случае возникновения вопросов

Пресс-служба Центра диагностики и телемедицины — Станислав Е. Самбурский 
e-mail: s.samburskiy@npcmr.ru