Google строит расширенный реальный микроскоп для обнаружения рака

Google строит расширенный реальный микроскоп для обнаружения рака

Google использовал компьютерное обучение для решения множества проблем, таких как избиение людей в Go и обнаружение экзопланет. Это благородные начинания, но теперь Google Research обратила свое внимание на проблему, которая оказывает реальное влияние на отдельных людей. Компания работает с врачами для разработки нейронной сети, которая может идентифицировать раковые клетки с помощью микроскопа дополненной реальности (ARM).

Многие аспекты современного медицинского тестирования были автоматизированы, но диагностика рака все еще занимает много времени. После проведения биопсии подозреваемой раковой массы патологоанатом должен исследовать клетки под микроскопом. В прошлом Google показала, что нейронная сеть может ускорить диагностику рака в цифровых изображениях, но большинство патологов используют сложные световые микроскопы для изучения слайдов. Решением был микроскоп дополненной реальности. С помощью этой системы AI AI видит изображение в микроскопе в режиме реального времени вместе с врачом. Затем он накладывает анализ поверх этого изображения.

Первой частью головоломки было получение нейронной сети, обученной тому, что есть и не является раком. Это еще одна сверточная нейронная сеть, подобная той, которая используется для изоляции голосов и планет. Работая с патологоанатомами, Google Research накопила тысячи гистологических изображений. Результатом стала пара алгоритмов обнаружения рака: один обнаруживает метастазы рака молочной железы в лимфатических узлах, а другие - рак предстательной железы. Они работают с увеличением от 4x до 40x.

Цель состоит не в том, чтобы заменить патологоанатома - вы, вероятно, пока не хотите доверять всему вашему скринингу рака на машину. Вот почему нейронная сеть привязана к системе ARM. Это похоже на мгновенное второе мнение. Нейронная сеть получает питание от окуляра микроскопа через камеру, снимающую 10 кадров в секунду. Выход ARM затем проецируется обратно через окуляр над камерой. Итак, патологоанатом не смотрит прямо на образец, а скорее на выход ИИ. Области, которые выглядят как рак для ИИ, подсвечиваются, поэтому врач может уделять особое внимание.

Подъем микроскопа с камерой и крошечным дисплеем AR может звучать как хлопот, но на самом деле это самый эффективный способ довести эту технологию до массы. Вы можете оснастить стандартный микроскоп с ARM, и он не требует каких-либо внешних аппаратных изображений, таких как мониторы. Диагноз рака может быть только началом. Google Research, эта технология может быть полезной при диагностике других заболеваний в будущем.