Google створила камеру світлового поля для шоломів віртуальної реальності

Компанія Google представила панорамну камеру світлового поля і додаток для перегляду знімків з такої камери в шоломі віртуальної реальності. Камера створює сферичне об'ємне зображення, в якому записана не тільки інтенсивність світла, але і напрямок променів в різних точках. За рахунок цього VR-шолом при русі голови створює більш реалістичне зображення, повідомляється в блозі компанії.

Зазвичай програми для шоломів віртуальної реальності показують повністю штучне зображення. Але крім цього існують програми, що дозволяють переноситися в реальне місце, наприклад, панорамні режими на картах. Зазвичай для цього використовуються 360-градусні камери, що створюють сферичне зображення або відео. Брак таких камер і VR-шоломів полягає в тому, що вони лише частково імітують справжній світ і не вміють створювати ефекти, що забезпечують сприйняття глибини людиною, наприклад, створювати ефект паралакса при русі.

Пленоптичні камери, або камери світлового поля, на відміну від звичайних камер, записують дані не тільки про колір та інтенсивність світла, але також векторну інформацію про напрямок світла. Таким чином, на етапі постобробки можна міняти глибину різкості в кадрі як на фотографіях, так і на відео.

Панорамна камера світлового поля, створена Google, складається з обертової платформи, на якій по дузі закріплено 16 камер GoPro. Під час зйомки платформа обертається приблизно 30 секунд, а камери періодично роблять фотографії, формуючи масив з приблизно тисячі фотографій, знятих з різних ракурсів. Після цього масив фотографій об'єднується в спеціальний файл, в якому містяться дані про розподіл променів світла всередині сфери.

Для перегляду таких файлів Google створила додаток Welcome to Light Fields, в якому користувач може «зануритися» в кілька популярних місць і об'єктів, наприклад, побувати в кабіні шатла «Дискавері». Під час перегляду користувач може рухати головою і бачити, як змінюється, наприклад, відбиття світла від яскравих джерел. Це відбувається через те, що для кожної точки всередині сфери програма створює зображення з урахуванням напрямку променів світла в цій точці.

Програма доступна в магазині Steam і сумісна з шоломами віртуальної реальності HTC Vive, Oculus Rift і шоломами на платформі Windows Mixed Reality.

Раніше прототип панорамної камери світлового поля показала компанія Lytro, що спеціалізується на розробці світлопільних камер.