Руки з "Амбарелла" використовують лише камеру, що самостійно керує автомобілем

Руки з "Амбарелла" використовують лише камеру, що самостійно керує автомобілем

Це звичайна мудрість у самозахищуваній промисловості, що лідар є обов'язковим. Час від часу деякі стверджували інакше, але майже всі серйозні зусилля, які зараз ведуться, включають принаймні один лідар - до цих пір. Виробник чіпів Ambarella, найвідоміший за створення систем обробки зображень, знайшов у багатьох камерах та смартфонах, представив свій автомобіль розробки EVA (автономний вбудований автомобіль), побудований за своєю архітектурою CVFlow та фалангою з 20 камер, що працюють на 16 зображень і зорів CV1 обробка соків. Мені пощастило бути одним з перших репортерів, щоб їхати в одному, тому що фірма зараз робить обмежені випробування на громадських дорогах в Санта-Кларі, штат Каліфорнія.

Амбарелла не намагається йти головою назустріч автомобілебудівним компаніям і планує запустити свої власні машини. Замість цього, EVA, побудований на модифікованому Lincoln MKZ, є розробкою та дизайном вітрини для того, що Ambarella може принести до цих компаній на шляху автономного рішення автомобіля, заснованого майже повністю на видінні, хоча це має єдину передню обличчя радар, щоб допомогти в складну погоду.

Усі в камерах з довгим та коротким діапазоном

Руки з "Амбарелла" використовують лише камеру, що самостійно керує автомобілем

Кожна стереокамера живиться власною парою амбареллами зорових сосудів CV1. Камери використовують сенсори Sony IMX317, що мають приблизно такий же розмір, як і типовий сенсор смартфона, але мають меншу роздільну здатність, щоб надавати їм більші пікселі та покращувало низький рівень освітленості та високу динамічну продуктивність. Генеральний директор дочірньої компанії Ambarella VisLab Альберто Броггі наголосив на важливості інтеграції модулів бачення з інтернет-провайдером (Image Signal Processor) у камері. Це можливо завдяки тому, що компанія Ambarella, як компанія, робить значну частину свого життя, що розвиває мережеві системи для різних застосувань.

Стереогарнітури короткого заряду розміщені на передній, задній і обох сторонах автомобіля. Використовуючи лінзи з риб'ячою водою, це забезпечує EVA з повним оглядом на 360 градусів площі безпосередньо навколо автомобіля. Чотири стереокамери підтримуються спеціальною парою CV1 SoC і використовують масив 2MP IMX290 від Sony, який має дуже великі пікселі.

Округлення системи - це радар на передній панелі для звільнення та водіння в умовах слабкої видимості, а ПК - для виконання задач з плавного зварювання, локалізації та планування на вищих рівнях. У цьому демонстраційному відео ви можете побачити загальну макету сенсора на EVA разом з тим, що він бачить (починаючи приблизно через 40 секунд), темряву тривимірної точки, яку він генерує, і об'єкти, які він розпізнає під час руху по передмісті вулиці. Системи короткохвильового та далекого дії сконструйовані таким чином, що автомобіль має вигляд на відстані від сусіднього бордюра до об'єктів, що знаходяться на сотні метрів.

CV1 і тепер CV2 забезпечують обидва зображення та обробку зору

Руки з "Амбарелла" використовують лише камеру, що самостійно керує автомобілем

Машина випробувань EVA була оснащена мікросхемами CV1, але компанія нещодавно оголосила про наступну, CV2, що має в 20 разів більше обсягу обробки, при навколо такої ж неймовірно низької потужності 4 вати. Компанія сподівається, що за допомогою CV2 та деякого додаткового розвитку вона зможе запустити всю автономну стек транспортного засобу виключно на власних чіпах, навіть не потребуючи, щоб ПК в даний час виконував деякі функції системи.

Чому Амберрела?

Амбарелла не є домашнім ім'ям для багатьох, навіть тих, хто стежить за технологією. Але ви майже напевно або використовували систему фотоапаратів, яку вони розробили, або сфотографувала її. Компанія спеціалізується на наданні широкого спектру креслення на основі зображень та зору рішення для ряду галузей, у тому числі безповоротні, wearables, безпеки, автомобільного та VR. Тому було б логічним, коли він демонструватиме застосування своїх технологій для самохідних автомобілів. Ці зусилля були досягнуті завдяки придбанню VisLab у 2015 році. Компанія VisLab та її засновник Broggi були ранніми піонерськими розробками в автономних транспортних засобах, починаючи з 1990-х років завдяки своїй роботі в університеті міста Парма, а також були постачальниками технологій для команди Terramax у знаменитому випуску DARPA 2005 року перед тим, як 2009 року виготовити VisLab як окрему компанію.

Процесори CV1 виконують функцію розпізнавання об'єктів та відстеження руху на додаток до створення хмари 3D-точок, як ви можете побачити в цьому режимі реального часу перцепційної системи автомобіля
Процесори CV1 виконують функцію розпізнавання об'єктів та відстеження руху на додаток до створення хмари 3D-точок, як ви можете побачити в цьому режимі реального часу перцепційної системи автомобіля

EVA Road Test

Команда від Ambarella та її дочірньої компанії VisLab відвели мене на тест-драйв у демонстраційній машині EVA. Я мав приємний погляд на те, що система бачила, коли ми їхали через спеціальний монітор перед моїм місцем. Це показало як власну оцінку автомобіля свого місцезнаходження, так і дані GPS для початківців. Більш цікаво, він також показав об'єкти, як вони були виявлені та ідентифіковані. Візуальні обчислення в режимі реального часу були вражаючими. Всі стаціонарні об'єкти, рухомі об'єкти, включаючи автомобілі та люди, та семантично важливі об'єкти, такі як стоп-сигнали, були швидко ідентифіковані та повідомлені.

Наша EVA демо-їзда була розроблена, щоб виділити кілька можливостей своєї системи зору
Наша EVA демо-їзда була розроблена, щоб виділити кілька можливостей своєї системи зору

Локалізація та планування шляху не були настільки поліровані. Дані GPS поневірялись (незважаючи на використання автомобіля високоякісного GPS) і почали плутати автомобіль, коли він суперечив своїм власним даним (на основі візуального розміщення на відомих картах). Це спричиняло деяке плетіння в нашій смузі. Це, плюс деякі хвилювання в плануванні шляху, також спричинило нас до того, що у нас виникли труднощі з складними лініями смуги.

З іншого боку, запобігання зіткненню транспортних засобів та системи безпеки працювали дуже добре. Ми були в змозі безпечно злитися на жвавому шосе майже на сліпому шляху, і, здивовавшись автомобілем, вийшовши з автостоянки, наш автомобіль гальмував практично миттєво. В цілому, оскільки основна технологія, до складу якої входять Ambarella і VisLab, - це система зору та обробка, я був дуже вражений цією частиною системи.

Я запитав Броггі про ведення нічного водіння без лідара, і він зробив розумний пункт, що, як і у випадку з людським водієм, фари автомобіля розроблені таким чином, щоб забезпечити безпечну видимість на передньому плані, а більшість інших об'єктів, що рухаються у напрямку до машини, мають власні вогні. Зрештою, люди є доказом існування можливості вечірнього водіння без лідар або ІЧ-підсвічування. Проте, це може стати проблемою для переконання партнерів і, нарешті, регуляторів безпеки, що автономні транспортні засоби можуть слідувати цьому прикладу.