Нейромережа навчили робити «професійні фотографії» з пейзажів Google Street View

Розробники Google створили Creatism - нейромережу, яка вміє створювати зі знімків Google Street View естетичні фотографії пейзажів, які справжні фотографи порахували роботами професіоналів. Стаття доступна для прочитання на сайті, а з роботами «фотографа» можна ознайомитися в галереї.

Сучасні технології дозволяють робити знімки відмінної якості за допомогою камери смартфона і супутніх додатків для обробки. Однак, справжня якість фотознімка визначається його естетикою, яка полягає в правильній композиції і добре підібраному освітленні - параметрах, визначення яких автоматично є складним завданням. Дослідження з візуального аналізу естетики фотографій з метою виявлення її об'єктивних характеристик проводилися раніше, проте автоматичне створення знімків з урахуванням всіх аспектів краси композиції і технічних параметрів все ще є невирішеним завданням.

Автори нової роботи представили Creatism - нейромережу, яка вміє робити професійні в плані естетики фотографії пейзажів. Ця система була створена за допомогою методів глибокого навчання і навчена кожному окремому параметру естетики (насиченості кольору, композиції, чіткості та освітленню) на прикладі робіт професійних фотографів. Навчена нейромережа обрізає панорамні фотографії Google Street View і налаштовує параметри обробки фотографій у додатку Snapseed.

Автори також представили новий параметр автоматичного налаштування ефектного світла знімка («dramatic mask»), який вирішує проблему недоліків природного освітлення місцевості. Цей параметр працює завдяки навчанню на негативах (розподілу яскравостей фотознімка) знімків пейзажів, зроблених професійними фотографами.

Під час генерування кожній фотографії з отриманої вибірки було присвоєно автоматичний «прогнозований» бал за шкалою естетики від 1 (рівень «фотографа-початківця») до 4 (рівень «професійного фотографа»).

На отриманих фотографіях дослідники провели варіацію «тесту Тьюринга»: знімок вважався зробленим на професійному рівні, якщо професійні фотографи не могли відрізнити його від робіт реальних людей. Для експерименту з оцінкою реальних фотографів дослідники взяли 400 фотографій, які отримали бал від 2,5 до 3 і показали їх у випадковому порядку разом з фотографіями, зробленими реальними людьми. Тест показав, що реальними роботами професійних фотографів серед 173 фотографій з найвищим «прогнозованим» рейтингом (2,9 і більше) 41,4 відсотка отримали оцінку 3 (знімок рівня «напівпрофесійного фотографа»).

Creatism - не перша розробка, яка навчила штучний інтелект креативити. Нещодавно ми писали про нейромережу, яка вміє створювати оригінальні твори мистецтва.