Услышать «Чёрный квадрат»: нейросеть научили писать музыку к изображениям

Китайский поисковик Baidu представил программу, сочиняющую оригинальную музыку на основе изображений.

Программа основана на технологии распознавания образов. Из каждого изображения вычленяются отдельные элементы, которые потом соотносятся с определённым типом эмоций. Например, для красного цвета задана эмоциональная окраска «страсть», для жёлтого — «тепло», и т. д.

Далее нейросеть подбирает определённое звучание музыки для каждого типа эмоций. К примеру, для картины Ван Гога «Звёздная ночь» нейросеть сочинила мягкую созерцательную мелодию, а для изображения скачущих лошадей — быструю и экспрессивную.