Google нанял фотографов, чтобы помочь обучить AI-Powered «клипы» камеры

Все камеры в вашей жизни до сих пор полностью под вашим контролем - вы решаете, что они снимают и как долго. Предстоящая камера Google Clips отличается. Он использует машинное обучение, чтобы решить, что важно, затем обрабатывает или отбрасывает кадры соответственно. Google представила это устройство в октябре 2017 года, но оно по-прежнему недоступно. Ожидается, что он поступит в продажу в ближайшее время, и теперь Google подробно рассказал, как он настроил нейронную сеть камеры, чтобы понять, что является значительным моментом.

Идея заключается в том, что Clips будет работать непрерывно, но он сохранит только видеоклипы, которые, по его мнению, вам понадобятся. Также имеется кнопка затвора для ручных захватов. Он имеет три часа автономной работы и 16 ГБ локального хранилища. Он не загружает видео в облако для обработки, поэтому нейронная сеть на устройстве (называемая Moment IQ) должна быть чрезвычайно эффективной.

Во многих отношениях Клипы являются воплощением того, что Google называет «ориентированным на человека дизайном». Это просто идея, что продукты AI должны делать что-то полезное для пользователя, не добавляя дополнительных стрессов или осложнений. Клипы смотрят мир и дают вам видео, которое, по его мнению, заставит вас улыбнуться. Тем не менее, обучение сети пониманию абстрактной концепции, как незабываемого видео, было нелегким подвигом.

Как и все нейронные сети, клипам нужно было увидеть кучи «хороших» и «плохих» видео, чтобы настроить свое поведение. Некоторые маркеры для сети были очевидны. Видео, которое размыто или частично затруднено, можно легко игнорировать. Тем не менее, Google также должен был преподавать ИИ о концепции времени. Вы не хотите слишком много наполнителей в ваших клипах, даже если что-то интересное происходит в какой-то момент.

Команда за Clips изначально просто показала образцовые изображения, которые они считали красивыми или интересными. Наряду с пониманием глубины резкости, освещения и правила третей, Гуглерс думал, что сеть сможет понять, что делает хороший клип. Однако это было не так. Чтобы помочь укрепить нюанс памятного видео в клипах, Google нанял документального кинорежиссера, фотожурналиста и фотографа изобразительного искусства, чтобы решить, какие изображения использовать в учебных клипах.

Google признает, что ИИ не будет совершенным, но команда уверена, что она сможет генерировать «хорошие» видео. Мы не будем знать, сколько видео с клипов будет хорошо, пока оно не запустится. Там еще нет даты выхода, но она будет стоить 250 долларов, когда она выйдет.