Microsoft Research разрабатывает технологию удаленного мониторинга здоровья с использованием только камер смартфонов

За последнее десятилетие исследователи обнаружили, что веб-камеры и камеры смартфонов могут быть объединены со специализированными алгоритмами искусственного интеллекта и действовать как системы удаленного персонального мониторинга здоровья.Чрезвычайно эффективно, точно и гибко. Этот метод предполагает измерение очень небольших изменений во всех аспектах тела с течением времени, включая даже изменения, которые во многих случаях незаметны для человеческого глаза.

Группа исследователей из Microsoft Research, Вашингтонского университета и OctoML успешно сотрудничали в разработке метода измерения жизненно важных показателей человеческого тела (в основном кровообращения, дыхания и жестов) с использованием самой системы камеры смартфона в сочетании с алгоритмом искусственного интеллекта. под названием MTTS-CAN, обученный выполнять измерения в реальном времени и анализировать данные, снятые камерой, тем самым обеспечивая высокоточную диагностику состояния физического и психического здоровья субъекта.

Основные физиологические процессы человека, такие как частота сердечных сокращений, кровоток и дыхание, часто со временем меняются очень незначительно. Системы камер могут непрерывно собирать информацию обо всех этих изменениях с помощью наблюдений на уровне пикселей и синтезировать ее в видео для анализа алгоритмами искусственного интеллекта. Оттуда ИИ может возвращать такие результаты, как частота сердечных сокращений, состояние дыхания и даже уровень кислорода в крови человека... через интерфейс приложения, предварительно установленный на самом телефоне.

Мониторинг здоровья с помощью камер — технология, которой уделяется все больше внимания

Потенциал применения этой технологии чрезвычайно богат. Его можно использовать в повседневных целях, таких как физические упражнения, оценка здоровья на дому и другие приложения для клинического мониторинга. В клинических условиях измерения с помощью камеры могут позволить врачам обеспечить более объективный анализ основного состояния здоровья пациента посредством видеозвонка. Это особенно важно в условиях пандемии COVID-19, в связи с которой необходимо строго соблюдать меры социальной изоляции.

Кроме того, с помощью датчиков камеры наблюдения с высокой частотой кадров система может фиксировать динамику сигналов, используемых для обнаружения фибрилляции предсердий, гипертонии и вариабельности сердечного ритма - передовые приложения в технологии удаленного мониторинга здоровья.

Прежде чем эту технологию можно будет широко использовать в повседневном использовании, предстоит еще проделать большую работу, но потенциал ее применения действительно многообещающий.