Інтерактивний 1916 Microsoft дозволить грати в комп'ютерні ігри реальними об'єктами

Розробники дослідницького підрозділу Microsoft створили інтерактивний 1916, що дозволяє інтегрувати реальні об'єкти в комп'ютерні програми. Він може розпізнавати дотик об'єктів, їх форму і переміщення по поверхні мату, а також жести рук користувача поруч з поверхнею. Творці системи продемонстрували кілька варіантів її використання, наприклад, в якості інтерактивного поля, яке гравці можуть для карткових ігор, повідомляється в блозі компанії, а також статті з описом розробки, яка буде представлена на конференції CHI 2018.

Взаємодія з комп'ютерами в основному передбачає, що всі об'єкти віртуальні і відображаються на екрані, а керування ними відбувається за допомогою пристроїв введення, таких як миша, клавіатура або контролер. В якості одного з перспективних способів взаємодії людей з комп'ютерами пропонується технологія доповненої реальності, яка дозволяє віртуальним об'єктам «вийти» за межі комп'ютерного екрану в реальний світ. Але вона не дозволяє зробити зворотного - інтегрувати реальні об'єкти у віртуальний світ.

Інженери з Microsoft Research під керівництвом Хайянь Чжан (Haiyan Zhang) створили в рамках проекту Zanzibar систему, яка дозволяє використовувати справжні об'єкти для взаємодії з віртуальним світом. В її основі лежить спеціальний складаний 1916 розміром близький до формату A3, в одному з торців якого розташовується жорсткий корпус з обчислювальними компонентами і акумуляторами, яких достатньо для двох годин роботи. У м'якій частині мату розташовані масиви NFC-антен і ємнісних датчиків.

Оскільки творці вирішили використовувати не єдину NFC-антену, а масив невеликих антен, 1916 може розпізнавати відразу кілька NFC-міток на відстані до трьох сантиметрів від своєї поверхні і визначати їх точне положення. Крім цього об'єкти можуть використовувати енергію антен для живлення простих компонентів, наприклад, світлодіодів. Масив ємнісних датчиків дозволяє мату визначати місце дотику до нього, форму контакту і навіть розпізнавати рух рук за десять сантиметрів від поверхні.

Творці мату продемонстрували безліч сценаріїв його використання в ігрових та освітніх цілях. Наприклад, для нього можна створювати ігрові фігурки з NFC-міткою, яка буде розпізнаватися системою і керувати персонажем у грі відповідно до переміщення реальної фігурки. Також 1916 може служити полем, на яке гравці будуть викладати карти в карткових іграх - вони будуть розпізнаватися системою і брати участь в бою. Крім того, творці показали, що 1916 можна застосовувати для навчання. Наприклад, користувач може викладати NFC-картки з буквами, які необхідно «змалювати» рухом пальця.

Розробники написали SDK для створення програм, що підтримують пристрій. SDK адаптований для ігор під Windows і iOS на популярному ігровому движку Unity. З його допомогою дві ігрові студії створили карткові ігри для мату, для управління якими використовуються реальні карти, фігурки або жести рук.

Частково схожу систему Amiibo розробила і застосовує в декількох своїх ігрових приставках компанія Nintendo. Вони можуть розпізнавати наближення спеціальних фігурок або карт персонажів з NFC-мітками і здійснювати дії в грі, наприклад, закликати відповідного персонажа або отримувати його одяг. Аналогічну систему Skylanders виробляє компанія Activision.