Слух допоміг роботі краще розуміти навколишній світ

Щоб роботи могли допомагати людині і замінювати її в якихось сферах, вони повинні думати, бачити і чути! Виявилося, звуки і здатність чути можуть допомогти машинам розрізняти предмети. Дослідники з Інституту робототехніки Університету Карнегі-Меллона, вважають, що слух може допомогти роботам визначати, який тип дії викликав звук, і допомогти їм використовувати звуки для передбачення фізичних властивостей нових об'єктів.

Деякі попередні роботи вже вказували на те, що звук - важлива складова сприйняття і розуміння зовнішнього світу, проте досі було не зовсім зрозуміло, як це можна використовувати в робототехніці. У новому дослідженні вчені виявили, що слух підвищив продуктивність роботів, а деякі з машин могли успішно класифікувати об'єкти в 76% випадків завдяки звуку.

Результати настільки порадували інженерів, що вони кажуть, що «було б корисно забезпечити майбутніх роботів інструментами, які могли б дозволяти їм постукувати по об'єктах, які вони хочуть ідентифікувати».

Для самого дослідження вчені записали відео і аудіо 60 об'єктів (інструменти, взуття, яблука та інші) в момент, коли вони ковзали або каталися по спеціальному лотку. Так вони створили набір даних, в якому було понад 15 000 файлів зі взаємодіями і дали проаналізувати його роботу. Примітно, що коли машина вивчила набір даних, вона змогла передбачити фізичні властивості об'єктів, які вона ще не чула, на основі знань про тих, з якими вона вже працювала.