Нейросеть научили подбирать озвучку к изображениям

Японская студия Qosmo разработала нейросеть Imaginary Soundscape. Она способна анализировать изображение, и добавлять к нему подходящий по смыслу звуковой трек.

На сайте проекта пользователю достаточно загрузить любое изображение - программа проанализирует его и подберет подходящее звуковое сопровождение исходя из тех данных, на которых ее обучали.

Например, если загрузить фотографию переполненной людьми городской улицы, нейросеть подберет в качестве звуковой дорожки шум толпы; добавив фото станции метро, пользователь услышит звук проезжающего поезда; снимок пляжа программа озвучит шумом морских волн.

Лучше всего нейросеть справляется с изображениями, где запечатлены относительно простые ситуации и сюжеты, - точность близится к 100%. Для каждой картинки система подбирает одну из 1 500 различных звуковых дорожек, на которые не распространяются авторские права.

Ранее сообщалось, что нейросеть победила лучшего игрока в го и научилась делать портреты обнаженных людей.