Дослідники з MIT і Google навчилися прибирати перешкоди з фотографій

Група дослідників з лабораторій Google і MIT створила алгоритм, що дозволяє прибирати з фотографій різні перешкоди, що загороджують об'єкт зйомки або погіршують його видимість. Результати роботи були представлені на конференції текст доповіді опублікований [PDF] на сайті Массачусетського технологічного інституту.

Для обробки необхідно кілька знімків з невеликим зміщенням відносно об'єкта зйомки. Алгоритм визначає межі контрастних об'єктів, після чого порівнює переміщення рухомих меж об'єктів відносно один одного і відокремлює об'єкти на передньому плані - зазвичай саме вони є перешкодою - від об'єктів на тлі. Після цього програма із серії початкових знімків комбінує два «очищених» результати, один для фону, один для переднього плану. Як приклад у демонстраційному ролику показано кілька знімків, з яких прибрано сітку Рабиця і відображення у склах.

Раніше дослідники з MIT вже публікували дослідження, присвячене фільтрації фотографій від відображення при фотозйомці через вікно з подвійним склом - алгоритм визначав у кадрі «зображення, що задвоїлося», і прибирав його з фотографії. Завдяки спільній роботі з Google, розробникам вдалося поліпшити алгоритм для застосування не тільки до відображень, але і потенційно до будь-яких перешкод на передньому плані.