Мы почти получили полноцветное ночное видение для работы
Ученые в Университете Калифорнии, Ирвине, экспериментировали с реконструированными сценами ночного видения в цвете с использованием алгоритма глубокого обучения. Алгоритм использует инфракрасные изображения невидимые невооруженным глазом; Люди могут видеть только легкие волны от около 400 нанометров (что мы видим как фиолетовые) до 700 нанометров (красных), а инфракрасные устройства могут видеть до одного миллиметра. Таким образом, инфракрасный показатель является существенным компонентом технологии ночного видения, поскольку она позволяет людям «видеть», что мы обычно воспринимаем как общая темнота.
Хотя термическая визуализация ранее использовалась для цветных сцен, захваченных в инфракрасном порядке, он не идеален. Термальная визуализация использует технику, называемую псевдоколью на «карту» каждый оттенок из монохроматического масштаба в цвет, что приводит к полезному, но очень нереальному образу. Это не решает проблему идентификации объектов и частных лиц в условиях низкого или без освещения.
Ученые в UC IRVINE, с другой стороны, стремились создать решение, которое позволило бы произвести изображение, похожее на то, что человек увидит в видимом свете спектра. Они использовали монохроматическую камеру, чувствительную к видимую и почти инфракрасному свету, чтобы захватить фотографии цветных палитры и лица. Затем они обучали сверточную нейронную сеть, чтобы предсказать видимые изображения спектра, используя только прилагаемые близко инфракрасные изображения. Процесс обучения привел к трем архитектурам: базовая линейная регрессия, U-NET, вдохновленная CNN (UNET) и дополненная U-Net (Unet-Gan), каждый из которых смогли произвести около трех изображений в секунду.
После того, как нейронная сеть произвела изображения в цвете, команда - состоит из инженеров, зрение ученых, хирургов, компьютерных ученых и докторских учеников, предоставила изображениям к классам, которые выбирали, какие выходы субъективно появлялись наиболее похожи на изображенное изображение. Эта обратная связь помогла команде выбирать, какая нейронная сетевая архитектура была наиболее эффективной, причем unet превосходит unet-gan, кроме как в увеличенных условиях.
Команда на UC Irvine опубликовала свои выводы в журнале Plos One в среду. Они надеются, что их технологии могут быть применены в безопасности, военных действиях и наблюдениях на животных, хотя их опыт также говорит им, что может быть применимо для снижения ущерба зрения зрения во время операций по глаз.
Читать далее
AMD покупает разработчика FPGA Xilinx за 35 миллиардов долларов
Сделка, которую мы обсуждали ранее в этом месяце, предоставит AMD доступ к новым рынкам, на которых она ранее не играла, включая FPGA и искусственный интеллект.
VIA Technologies и Zhaoxin укрепляют связи с разработчиками процессоров x86
VIA и Zhaoxin углубляют свое стратегическое партнерство за счет дополнительной передачи интеллектуальной собственности, предназначенной для ускорения долгосрочной разработки продукта.
Ученые разработали спрей для носа, который может вылечить коронавирус
В недавно опубликованном исследовании смесь оказалась эффективной для дезактивации нового коронавируса до того, как он смог заразить клетки.
Apple вдвое снижает гонорары для разработчиков магазинов приложений, зарабатывающих менее 1 миллиона долл
В будущем обычное 30-процентное сокращение продаж Apple на платформе iOS упадет до 15 процентов для небольших разработчиков. Epic, однако, утверждает, что это всего лишь попытка расколоть сообщество разработчиков.