Engram: генеративный аудиосэмплер с принципами circuit bending для ИИ-моделей
Engram — это генеративный аудиосэмплер, который применяет принципы circuit bending к ИИ-аудиомоделям. Дебютный проект разработчика Thoughtful Things предлагает аппаратный инструмент, позволяющий выводить модели за пределы их штатных возможностей и находить выразительные, необычные звуки для сэмплирования.
Engram: генеративный аудиосэмплер с принципами circuit bending для ИИ-моделей
Базовая архитектура Engram близка к традиционному сэмплеру: встроенный микрофон и стерео линейный вход для записи, пошаговый секвенсор с возможностью сохранения паттернов, а также поддержка MIDI и CV-подключений.
Формат и возможности
Особенность устройства — использование так называемого «tiny AI». Это отличие задумано, чтобы отделить автономные модели устройства от «большого ИИ» вроде Suno или ChatGPT.
Встроенные ИИ-модели позволяют обрабатывать и искажать записи, создавая необычные и глитчевые текстуры из существующего аудио с помощью настраиваемых параметров. Engram также способен генерировать сэмплы с нуля, после чего к ним можно применить те же процессы обработки.
Встроенный микрофон, по заявлению разработчика, поддерживает как lo-fi сэмплирование, так и голосовое управление. Также планируется внедрение плагинообразных аудиомоделей, которые можно будет менять местами — по аналогии с картриджами ROMpler старой школы.
Философия проекта
«Как исследователь и музыкант, я уже некоторое время изучаю ИИ/машинное обучение и искусство, — пишет основатель Thoughtful Things Эван Кинг на странице Engram в Kickstarter. — Я обучал модели генерировать необычные растения и насекомых для обложек альбомов; я извлекал призрачные звуки из музыкальных моделей, “глитчуя” их входы; я разрабатывал поэтические инструменты для написания песен, вызывающие галлюцинации у моделей распознавания речи».
Далее в посте объясняется, что Engram задуман для исследования тех аспектов ИИ, которые интересны Кингу, — прежде всего, выведения концепции за рамки её изначального назначения в неизведанные области. Thoughtful Things также подтверждает, что модели Engram обучены исключительно на открытых датасетах, содержащих только аудио, лицензированное для коммерческого использования.«Со временем у меня сложилось провокационное мнение: “чёрный ящик” в ИИ-искусстве по определению скучен. Это потому, что чёрные ящики спроектированы ради эффективности, а не человеческой агентности. Эффективность не оставляет места экспериментам и человеческому несовершенству — тем вещам, которые делают искусство интересным. Современные инструменты отлично подходят для массового выпуска корпоративного контента, но они плохи для художников: людей, которые постоянно ищут новые способы расширить свои уникальные творческие процессы».
Статус проекта
На момент написания проект Engram размещён на Kickstarter и более чем на три четверти приблизился к цели в $10 600, при этом до завершения кампании остаётся 27 дней.
По словам разработчика, инструмент сейчас представляет собой играбельный и готовый к производству прототип, который активно тестируют музыканты. Следующий этап — создание финального, готового к розничной продаже дизайна.
Желающие поддержать проект могут зарезервировать устройство первой производственной партии за $770. Дополнительная информация — на странице Kickstarter.
- Комментарии


