Новий алгоритм може зробити звук VR більш реалістичним
Ви, мабуть, знайомі з тим, як хороший звуковий дизайн може оживити гру чи відео. Це може зайняти величезну кількість творців годину на годину, щоб звук був правильним, але майже не вистачає часу, щоб створити ідеальний аудіо для досвіду віртуальної реальності. Дизайн звуку був значно спрощений через вроджений неписаний характер моделювання VR, але новий алгоритм дослідників зі Стенфорда може остаточно змінити це.
У сценаріях засобів масової інформації, таких як попередньо відтворене 2D-відео, ви завжди знаєте, звідки повинен надходити звук - рівень звуку для кожного каналу ніколи не змінюється від одного перегляду до іншого. Навіть 3D-гра має працездатний рівень складності завдяки заздалегідь визначеним параметрам середовища. У VR просто просто занадто багато змінних, щоб створити ідеальний, реалістичний звук з будь-якої точки зору.
В даний час алгоритми створення звукових моделей виходять із робіт, виконаних більше століття тому вченим Германом фон Гельмгольцем. В кінці 19 століття Гельмгольц розробив деякі теоретичні основи поширення хвиль. Так зване рівняння Гельмгольца стало головним компонентом аудіомоделювання разом із методом граничних елементів (BEM).
Це все добре і добре, якщо ви маєте справу з середовищем без занадто багато змінних. Віртуальна реальність пояснює можливі аудіомоделі до раніше нечуваних рівнів. Щоб зробити звук VR справжнім, інженерам потрібно буде створити звукові моделі, засновані на тому, де глядач стоїть у віртуальному світі та на що вони дивляться. Для цього з рівнянням Гельмгольца та BEM знадобиться потужні комп'ютери кілька годин. Отже, далеко не практичне.
Потенційне рішення походить від професора Стенфорда Дуга Джеймса та аспіранта Юй-Сяна Ванга. Новий алгоритм, прискорений графічним процесором, обчислює звукові моделі в тисячі разів швидше, повністю уникаючи рівняння Гельмгольца та BEM. Ми говоримо секунди обробки замість годин.
Підхід пари запозичений у австрійського композитора 20-го століття Фріца Генріха Кляйна, який знайшов спосіб створити "Материнний акорд" з декількох нот фортепіано. Вони називають свій алгоритм KleinPAT на знак визнання його посмертного внеску. Наведене вище відео містить деякі порівняння між звуковими моделями, створеними Helmholtz, та KleinPAT. Вони звучать дуже схоже, в чому справа. Ви можете отримати майже однаковий звук від KleinPAT зі значно меншим часом обчислення. Дослідники вважають, що цей алгоритм міг би змінити ігри для імітації аудіо в динамічних 3D середовищах.
Читати далі
YouTube розробив власний пристрій транскодування
YouTube розробив власні відеопередачі, щоб зламати вузькі місця, накладені уповільненням закону Мура.
Windows 10 зробить Flash видалення обов'язковим цим літом
В більшості випадків Flash було поступово поступово, але є ще один цвях, який буде стукаючи у труну Flash, люб'язно Microsoft. Незабаром Windows 10 зробить флеш-видалення обов'язковим.
Google прагне зробити Quantum Computing життєздатну до 2029 року
Google знаходиться на наступному кампусі з кампусом Quantum Ai, де він сподівається побудувати корисний, виправлений постійним квантовим комп'ютером протягом наступного десятиліття. Десять років можуть звучати як довгий час, але це не буде легко розробити квантові обчислення.
Графен міг радикально покращити жорсткі диски, якщо ми могли тільки зробити речі
Дослідники виявили, що графен може бути феноменальним для жорстких дисків, але нам доведеться вирішити багато проблем з матеріалом, перш ніж це може статися.