Полный текст

Десятилетиями синтез полагался на математические формулы. Google Magenta изменила парадигму, научив компьютеры «галлюцинировать» звук на основе физики. Используя DDSP, нейросети анализируют тысячи часов аудио, чтобы понять не ноты, а физическую причину звука — трение смычка, дыхание во флейте, резонанс дерева.

Это делает возможным «Tone Transfer»: вы можете настучать ритм по столу, а ИИ перерисует его как соло на скрипке, сохранив вашу человеческую динамику, но полностью заменив тембр. Это не сэмплирование, а реконструкция реальности. ИИ здесь выступает как «тембральный протез», позволяя музыканту играть на инструментах, к которым он никогда не прикасался, с нюансировкой, недоступной MIDI.