Исследовательский проект Google под названием Magenta, который с помощью ИИ помогает людям проявлять своё творческое начало, представил экспериментальный музыкальный инструмент с открытым исходным кодом NSynth Super. Он использует нейронную сеть NSynth, способную генерировать различные звуки.
NSynth Super — устройство, которое раскрывает потенциал нейронной сети. Как говорит научный сотрудник Google Brain Дуглас Эк (Douglas Eck), NSynth создаёт не ноты, а непосредственно звуки инструмента. Алгоритм изучает ключевые качества того, из чего состоит отдельный звук, и может комбинировать эти звуки, создавая тем самым нечто совершенно новое.
Устройство, на котором Google предлагает экспериментировать с алгоритмом, имеет площадку управления, каждый сектор которой можно привязать к определённому инструменту. Звуки этих инструментов можно комбинировать, водя пальцем по площадке. Но NSynth Super не просто накладывает друг на друга существующие звуки — система синтезирует совершенно новые, основываясь на акустических качествах отдельных инструментов.
NSynth Super может работать с любым источником MIDI-звука, будь то цифровая звуковая рабочая станция, секвенсор или клавишный синтезатор. Устройство позволяет настраивать некоторые параметры звука — например, атаку, спад, поддержку и затухание.
Google не даёт возможности купить NSynth Super, но предлагает инструкцию по созданию собственного устройства на базе Raspberry Pi. Есть даже информация о том, как сделать печатную плату и корпус.
