Команда исследователей разработала новую модель искусственного интеллекта под названием Fugatto, которая способна генерировать звуки, которые никогда раньше не слышали. Развитие, осуществляемое Nvidia, специализируется на создании звука из текстовых подсказок и, по словам разработчиков, является своего рода «швейцарским армейским ножом» для звуков. Модель способна создавать уникальные звуковые композиции, которые можно использовать для редактирования, а также для создания новых звуков, которые ранее были невозможны.
Как объяснил Ричард Керрис Nvidia, Fugatto является более гибкой и универсальной моделью, чем другие подобные технологии. Он способен генерировать звуки, такие как «лай трубы» или «саксофон». Например, на основе текстового подсказки «Глубокие, рев Бас -импульсы в паре с прерывистым, высокочастотным цифровым чирением, как звук пробуждения массивной интеллектуальной машины», модель создала новый уникальный звук, который не может быть воспроизведен обычными инструментами.
Кроме того, Fugatto может преобразовать звуки из одного типа в другой, например, преобразование звука поезда в струнный оркестр. Продюсер IDO Mixed, который участвует в программе Nvidia Inception, сказал: «Эта вещь дикая. Звук - мое вдохновение. Идея, что я могу создать совершенно новые звуки в летании в студии, невероятна».
Развитие Fugatto заняло более года и использовало миллионы аудионосных кубиков для изучения. Однако, несмотря на свой потенциал в музыке и звуковом дизайне, существуют опасения влияния этой технологии на традиционных создателей и их искусство.
