Новый алгоритм может сделать звук VR более реалистичным
Вы, наверное, знакомы с тем, как хороший звуковой дизайн может оживить игру или видео. Огромное количество создателей может потребовать час за часом, чтобы сделать звук правильным, но почти не хватает времени, чтобы создать идеальный звук для опыта виртуальной реальности. Звуковой дизайн был значительно упрощен из-за врожденной неисследованной природы симуляции виртуальной реальности, но новый алгоритм от исследователей из Стэнфорда может, наконец, изменить это.
В сценариях мультимедиа, таких как предварительно отрендеренное 2D-видео, вы всегда знаете, откуда должен исходить звук - уровни звука для каждого канала никогда не меняются от одного просмотра к другому. Даже трехмерная игра имеет работоспособный уровень сложности благодаря заранее заданным параметрам среды. В VR просто слишком много переменных, чтобы создать идеальный, реалистичный звук со всех точек зрения.
В настоящее время алгоритмы создания моделей звука основаны на работах, выполненных более века назад ученым Германом фон Гельмгольцем. В конце 19 века Гельмгольц разработал некоторые теоретические основы распространения волн. С тех пор так называемое уравнение Гельмгольца стало основным компонентом моделирования звука наряду с методом граничных элементов (БЭМ).
Это все хорошо, если вы имеете дело со средой без слишком большого количества переменных. Виртуальная реальность поднимает возможные аудио модели до ранее неслыханных уровней. Чтобы сделать VR-звучание аутентичным, инженерам потребуется создать модели звука, основанные на том, где зритель находится в виртуальном мире и на что он смотрит. Для этого с помощью уравнения Гельмгольца и БЭМ потребуются мощные компьютеры за несколько часов. Так что далеко не практично.
Потенциальное решение исходит от профессора Стэнфорда Дуга Джеймса и аспиранта Жуй-Сянь Вана. Новый алгоритм с GPU-ускорением вычисляет модели звука в тысячи раз быстрее, полностью избегая уравнения Гельмгольца и БЭМ. Мы говорим о секундах обработки вместо часов.
Подход пары позаимствован у австрийского композитора 20-го века Фрица Генриха Кляйна, который нашел способ создания «материнского аккорда» из множества фортепианных нот. Они называют свой алгоритм KleinPAT в знак признания его посмертного вклада. В приведенном выше видео приведены некоторые сравнения моделей звука, созданных Гельмгольцем, и KleinPAT. Они звучат очень похоже, и в этом суть. Вы можете получить практически идентичный звук из KleinPAT с гораздо меньшим вычислительным временем. Исследователи полагают, что этот алгоритм может изменить правила игры для имитации звука в динамических трехмерных средах.
Читать далее
Обзор: Oculus Quest 2 может стать переломным моментом для массового внедрения VR
Oculus Quest 2 теперь доступен, и это улучшение по сравнению с оригиналом во всех отношениях. И все же это на 100 долларов дешевле, чем последний выпуск. Проведя некоторое время с Quest 2, я считаю, что мы можем оглянуться на него как на гарнитуру, которая наконец сделала VR доступной для массовых потребителей.
Samsung, Стэнфорд, создали дисплей с разрешением 10000 пикселей на дюйм, который может революционизировать VR и
Спросите любого, кто провел в гарнитуре VR более нескольких минут, и они отметят эффект дверного экрана. Это могло бы устранить его навсегда.
НАСА: астероид все еще может поразить Землю в 2068 году
Согласно новому анализу Гавайского университета и Лаборатории реактивного движения НАСА, этот астероид размером с небоскреб все еще может столкнуться с Землей в 2068 году.
AMD может разрешить кастомные карты RX 6900 XT, стартовые запасы могут быть ограничены
Ходят слухи, что Nvidia может быть не единственной компанией, столкнувшейся с нехваткой продукции в этот праздничный сезон. В целом, высокопроизводительные графические процессоры может быть очень сложно найти.