Новий алгоритм може зробити звук VR більш реалістичним

Ви, мабуть, знайомі з тим, як хороший звуковий дизайн може оживити гру чи відео. Це може зайняти величезну кількість творців годину на годину, щоб звук був правильним, але майже не вистачає часу, щоб створити ідеальний аудіо для досвіду віртуальної реальності. Дизайн звуку був значно спрощений через вроджений неписаний характер моделювання VR, але новий алгоритм дослідників зі Стенфорда може остаточно змінити це.

У сценаріях засобів масової інформації, таких як попередньо відтворене 2D-відео, ви завжди знаєте, звідки повинен надходити звук - рівень звуку для кожного каналу ніколи не змінюється від одного перегляду до іншого. Навіть 3D-гра має працездатний рівень складності завдяки заздалегідь визначеним параметрам середовища. У VR просто просто занадто багато змінних, щоб створити ідеальний, реалістичний звук з будь-якої точки зору.

В даний час алгоритми створення звукових моделей виходять із робіт, виконаних більше століття тому вченим Германом фон Гельмгольцем. В кінці 19 століття Гельмгольц розробив деякі теоретичні основи поширення хвиль. Так зване рівняння Гельмгольца стало головним компонентом аудіомоделювання разом із методом граничних елементів (BEM).

Це все добре і добре, якщо ви маєте справу з середовищем без занадто багато змінних. Віртуальна реальність пояснює можливі аудіомоделі до раніше нечуваних рівнів. Щоб зробити звук VR справжнім, інженерам потрібно буде створити звукові моделі, засновані на тому, де глядач стоїть у віртуальному світі та на що вони дивляться. Для цього з рівнянням Гельмгольца та BEM знадобиться потужні комп'ютери кілька годин. Отже, далеко не практичне.

Потенційне рішення походить від професора Стенфорда Дуга Джеймса та аспіранта Юй-Сяна Ванга. Новий алгоритм, прискорений графічним процесором, обчислює звукові моделі в тисячі разів швидше, повністю уникаючи рівняння Гельмгольца та BEM. Ми говоримо секунди обробки замість годин.

Підхід пари запозичений у австрійського композитора 20-го століття Фріца Генріха Кляйна, який знайшов спосіб створити "Материнний акорд" з декількох нот фортепіано. Вони називають свій алгоритм KleinPAT на знак визнання його посмертного внеску. Наведене вище відео містить деякі порівняння між звуковими моделями, створеними Helmholtz, та KleinPAT. Вони звучать дуже схоже, в чому справа. Ви можете отримати майже однаковий звук від KleinPAT зі значно меншим часом обчислення. Дослідники вважають, що цей алгоритм міг би змінити ігри для імітації аудіо в динамічних 3D середовищах.

Читати далі

Amazon скопійовано продукти продавців, маніпульованих алгоритмів, щоб відобразити свої власні версії

Вони кажуть, що імітація є найвищою формою лестощів, але для підприємств, які продають на Amazon, це може бути різниця між успіхом та руйнуванням.

Внутрішні дослідження Twitter підтверджує, що його алгоритм сприяє права голосу

В останні роки консервативні політики та активісти порушувались проти "скасування культури", стверджуючи, що твіттер та інші соціальні медіа-розетки упереджені проти них - отже, існування правої альтернатив, як Gab, Parler, та нова правда Трампа соціальна. Twitter тільки що опублікував деякі внутрішні дослідження, що пропонує протилежне. Згідно з документом, його алгоритм фактично сприяє правильному голосі.

Останні оновлення iOS використовує алгоритми виявлення нуду в дитячій версії Messenger

Функція розгорнута до iPhones та iPads з iOS 15.2, яка стала доступною понеділка.

Мета поселяється з DOJ через дискримінаційні алгоритми AD

Новий позов стверджує, що маркетингові інструменти META дозволили та спонукали рекламодавців орієнтуватися на житлові оголошення на основі демографічних характеристик, що заборонено Законом про справедливе житло.