Nvidia AI може відтворювати повні міські середовища в Unreal Engine 4

Nvidia AI може відтворювати повні міські середовища в Unreal Engine 4

Протягом багатьох років інтерес до штучних нейронних мереж збільшився, оскільки такі компанії, як Google та Facebook, значною мірою інвестували в машини, які можуть здаватися людьми. Сьогодні AI може розпізнавати об'єкти на фотографіях або допомогти генерувати реалістичну комп'ютерну мову, але Nvidia успішно побудував нейронну мережу, яка може створити весь віртуальний світ за допомогою ігрового движка. Дослідники припускають, що цей "гібридний" підхід може в один прекрасний день створювати ігор, створений за допомогою ІІ, реальністю.

Система, побудована інженерами Nvidia, використовує багато тих самих частин, що й інші експерименти з AI, але вони розташовані дещо іншим чином. Метою проекту було створення простого симулятора водіння, але без використання будь-яких людей для розробки навколишнього середовища.

Як і всі нейронні мережі, система потребувала навчальних даних. На щастя, робота на самохідних автомобілях забезпечила велику кількість навчальних кадрів для автомобіля, що рухається по міських вулицях. Команда використовувала мереж сегментації для розпізнавання різних категорій об'єктів, таких як дерева, автомобілі, небо, будівлі тощо. Сегментовані дані полягають у тому, що Nvidia потрапляє у свою модель, яка використовувала генеративну змагальну мережу для підвищення точності кінцевої продукції. По суті, одна мережа створила відтворення сцени, а друга мережа буде передавати або відмовитися від них. З плином часу мережа налаштовується, щоб створювати вірогідні дані.

Nvidia підключила свій AI до Unreal Engine 4, яка запускає такі ігри, як PUBG, Fortnite і Octopath Traveler та багато іншого. Однак, команда не забезпечила повне середовище в UE4. Швидше за все, AI отримав лише основну топологію міського середовища. AI заповнив світ будівлями, дорогами, транспортними засобами та текстурами на основі того, що він дізнався з навчальних даних.

Отримані кадри виглядають практично реально, і Nvidia навіть не потребує масивних серверних ферм для запуску AI, що генерує цей віртуальний світ. Для цього потрібен лише один графічний процесор, хоча за загальним визнанням, це була жахливо потужна графічна карта - $ 3000 Titan V. АІ створив 25 кадрів в секунду, що достатньо для того, щоб зробити симуляцію гладкою та відтворюваною. Однак AI змінить кольори та текстури в кожному кадрі, оскільки в ньому немає нічого дивного в машині без будь-якої пам'яті; кожен кадр - це нова подія без зв'язку з попереднім. Щоб це виправити, інженери Nvidia створили первинну короткострокову пам'ять для AI, щоб допомогти їй залишатися послідовною.

Хоча ця технологія є захоплюючою, дизайнерів застерігає, що це може бути десятиліттями, перш ніж ігри насправді використовують світло, створений за допомогою AI. Вони порівнюють цей проект із трасуванням променів для створення більш реалістичного освітлення. Є кілька десятиліть демо-версій для відстеження променів, але кілька тижнів тому NVIDIA запустила пробні процесори з промінням траєкторією.

Читати далі

Зонд NASA зберігає величезний зразок астероїда для повернення на Землю
Зонд NASA зберігає величезний зразок астероїда для повернення на Землю

Після недавньої успішної операції touch and go, NASA повідомило, що значний зразок астероїда зараз заблокований у контейнері для повернення зразків зонда.

Власники Google Pixel Slate повідомляють про помилку Flash Storage
Власники Google Pixel Slate повідомляють про помилку Flash Storage

Форуми підтримки продуктів Google заповнені розлюченими власниками Pixel Slate, які кажуть, що їх пристрої часто стикаються з помилками сховища.

Швидкий сплеск радіо в нашій галактиці офіційно є повторювачем
Швидкий сплеск радіо в нашій галактиці офіційно є повторювачем

Минулого місяця команда оголосила про відкриття FRB у нашій власній галактиці, давши вченим шанс вивчити ці химерні сигнали зблизька. Наукове співтовариство досить скоро отримає багато даних про FRB - нове дослідження підтверджує, що це неподалік FRB повторюється.

Первісні користувачі Apple M1 Mac повинні бути обережними щодо сумісності
Первісні користувачі Apple M1 Mac повинні бути обережними щодо сумісності

Нові MacBook та Apple mini від Apple зробили хвилі, частково завдяки новому кремнію всередині них. Однак нова екосистема ARM від Apple не позбавлена ​​зростаючих зусиль.