Google выпускает экспериментальный ИИ, имитирующий синестезию

Василий Кандинский оставил свою юридическую карьеру, чтобы изучать живопись в Мюнхенской академии изящных искусств. Его считают одним из основоположников чистой абстракции в живописи, и это может быть связано с тем, что он интригующе воспринимал цвета и формы.

Этот инструмент AI позволяет позаимствовать уши Кандинского. Теперь вы можете услышать, что он делал, когда рисовал (или, по крайней мере, интерпретацию того, что он описал в Google).

Что, если бы вы могли слышать цвет?

В сотрудничестве с Центром Помпиду в Париже компания Google Arts & Culture недавно запустила экспериментальный проект под названием Play a Kandinsky .

Как следует из названия, интерактивный инструмент позволяет вам испытать абстрактные картины Василия Кандинского в музыкальной форме. Кандинский был русским художником, у которого было неврологическое заболевание, называемое синестезией.

Музыка, написанная Антуаном Бертеном и NSDOS, была вдохновлена ​​музыкой времен Кандинского и сгенерирована нейронной сетью Google Transformer.

При нажатии на « Запустить эксперимент» звучит музыка, и ИИ просит вас несколько раз щелкнуть кружок в центре экрана. Каждый раз, когда вы это делаете, цвета круга и фона за ним будут меняться, а также музыка.

Синестезия – это состояние, которое влияет на ваше восприятие: стимуляция одного чувства запускает автоматический, непроизвольный опыт в другом. Например, синестет (человек с синестезией) может подумать о числе «4» и увидеть красный цвет или попробовать яблоки, когда они услышат слово «друг».

Для Кандинского наличие синестезии означало, что он видел цвета, когда слышал музыку, и слышал музыку, когда писал. «Звук цветов настолько определен, что трудно найти кого-нибудь, кто бы выразил ярко-желтый с басовыми нотами или темное озеро с высокими частотами», – сказал он однажды.

В 1925 году он создал шедевр, который назвал желто-красно-синим (на фото выше). Это была картина маслом, которая отличала его от влиятельных течений в искусстве его времени, а именно конструктивизма и супрематизма.

Третья часть пьесы Кандинского позволяет услышать картину в классической симфонии семи частей. Его щедрое использование синего и желтого цветов в резком контрасте друг с другом соответствует теории цвета немецкого поэта Иоганна Вольфганга фон Гете.

Google приписывает Кандинскому цвета и формы точно так же, как вы приписываете клавиши и струны инструмента музыканту. «Чрезвычайно одаренный художник, он организовал цветные звуки в цветовые симфонии», – говорится в рассказе .

Искусство – это больше, чем кажется на первый взгляд

Мы никогда не узнаем, что именно слышал Кандинский во время работы, но именно такие проекты, как этот, действительно пробуждают творческий потенциал и самоанализ.

Может быть, между искусством и музыкой есть какая-то связь, которую большинство из нас не в состоянии полностью понять. Эксперимент Google неплохо исследует эту возможность.

Кредит изображения: Василий Кандинский / Wikimedia Commons