Новий алгоритм може зробити звук VR більш реалістичним
Ви, мабуть, знайомі з тим, як хороший звуковий дизайн може оживити гру чи відео. Це може зайняти величезну кількість творців годину на годину, щоб звук був правильним, але майже не вистачає часу, щоб створити ідеальний аудіо для досвіду віртуальної реальності. Дизайн звуку був значно спрощений через вроджений неписаний характер моделювання VR, але новий алгоритм дослідників зі Стенфорда може остаточно змінити це.
У сценаріях засобів масової інформації, таких як попередньо відтворене 2D-відео, ви завжди знаєте, звідки повинен надходити звук - рівень звуку для кожного каналу ніколи не змінюється від одного перегляду до іншого. Навіть 3D-гра має працездатний рівень складності завдяки заздалегідь визначеним параметрам середовища. У VR просто просто занадто багато змінних, щоб створити ідеальний, реалістичний звук з будь-якої точки зору.
В даний час алгоритми створення звукових моделей виходять із робіт, виконаних більше століття тому вченим Германом фон Гельмгольцем. В кінці 19 століття Гельмгольц розробив деякі теоретичні основи поширення хвиль. Так зване рівняння Гельмгольца стало головним компонентом аудіомоделювання разом із методом граничних елементів (BEM).
Це все добре і добре, якщо ви маєте справу з середовищем без занадто багато змінних. Віртуальна реальність пояснює можливі аудіомоделі до раніше нечуваних рівнів. Щоб зробити звук VR справжнім, інженерам потрібно буде створити звукові моделі, засновані на тому, де глядач стоїть у віртуальному світі та на що вони дивляться. Для цього з рівнянням Гельмгольца та BEM знадобиться потужні комп'ютери кілька годин. Отже, далеко не практичне.
Потенційне рішення походить від професора Стенфорда Дуга Джеймса та аспіранта Юй-Сяна Ванга. Новий алгоритм, прискорений графічним процесором, обчислює звукові моделі в тисячі разів швидше, повністю уникаючи рівняння Гельмгольца та BEM. Ми говоримо секунди обробки замість годин.
Підхід пари запозичений у австрійського композитора 20-го століття Фріца Генріха Кляйна, який знайшов спосіб створити "Материнний акорд" з декількох нот фортепіано. Вони називають свій алгоритм KleinPAT на знак визнання його посмертного внеску. Наведене вище відео містить деякі порівняння між звуковими моделями, створеними Helmholtz, та KleinPAT. Вони звучать дуже схоже, в чому справа. Ви можете отримати майже однаковий звук від KleinPAT зі значно меншим часом обчислення. Дослідники вважають, що цей алгоритм міг би змінити ігри для імітації аудіо в динамічних 3D середовищах.
Читати далі
НАСА створило колекцію моторошних космічних звуків на Хелловін
Останній випуск даних NASA перетворює сигнали з-поза Землі в моторошні звуки, які, безсумнівно, викликають озноб у вашій хребті.
Нові відомості про Intel Rocket Lake: Сумісність із зворотною стороною, Xe Graphics, Cypress Cove
Intel опублікувала трохи більше інформації про Rocket Lake та його 10-нм процесор, який було перенесено назад на 14 нм.
VIA Technologies, Zhaoxin зміцнюють зв'язки з процесором x86
VIA та Zhaoxin поглиблюють своє стратегічне партнерство за допомогою додаткових передач ІР, спрямованих на пришвидшення довгострокової розробки продуктів.
AMD може дозволити користувацькі картки RX 6900 XT, стартовий запас може бути обмежений
Ходять чутки, що Nvidia, можливо, не єдина компанія, яка стикається з дефіцитом виробництва у цей святковий сезон. Графічні процесори високого класу взагалі може бути дуже важко знайти.