Приложение Imaginary Soundscape подберет идеальный звук к картинке

Сотрудники Токийского университета разработали работающее на основе искусственного интеллекта приложение Imaginary Soundscape, которое может подобрать идеальный звук к любому изображению.

Например, рассматривая японскую гравюру «Рыбацкие лодки», пользователь услышит плеск волн. В тестовых инсталляциях выбранный видеосюжет очень часто сопровождается звуковым фрагментом, который практически идеально совпадает с ожиданиями пользователей, передает «Техкульт».

Столь впечатляющий результат — на самом деле продукт относительно простого ИИ, который распознает объекты внутри изображения и затем сопоставляет их с более чем 52 тысячами звуковых файлов. Ранняя версия Imaginary Soundscape, запущенная в январе, во многом напоминает используемую в Google Maps и в Google Earth функцию Google Street View.

Несмотря на то, что новый вариант приложения выглядит намного более внушительно, он не лишен недостатков. Так, в его работе вполне возможны некоторые ошибки, да и количество файлов не мешало бы увеличить в несколько раз. Как показал опыт, наиболее удачные звуковые «илюстрации» у Imaginary Soundscap получаются к художественным работам, фотографиям и абстрактной живописи.