Об этом проекте

Live Smith — это бета-расширение с ИИ-агентом для Ableton Live, позволяющее пользователям взаимодействовать со своей средой музыкального производства через естественный языковой диалог. Выбрав трек, клип, устройство или другой поддерживаемый объект Live и выбрав «Ask Live Smith», пользователи могут просматривать, создавать и редактировать MIDI-части, упорядочивать треки и сцены, настраивать параметры микшера и работать с сэмплами и встроенными устройствами Live — всё через разговорный интерфейс. Инструмент поддерживает несколько подключений ИИ-моделей, включая прямые интеграции API с OpenAI, Anthropic и Google Gemini (через его совместимую с OpenAI конечную точку), а также экспериментальные входы через подписку для ChatGPT, Claude и Google Antigravity. Пользователи могут сохранять несколько моделей в одном профиле подключения и переключаться между ними и уровнями рассуждений прямо из панели ввода. Встроенный веб-поиск доступен через совместимые прямые подключения API. Для генерации аудио Live Smith интегрируется с ElevenLabs для создания музыки и звуковых эффектов, Mureka для генерации инструментальных партий и песен на основе подсказок, официальным Suno Platform API и экспериментальным подключением аккаунта Suno.com, использующим существующие кредиты подписки пользователя. Подключение Suno.com поддерживает импорт песен, их расширение и прослушивание через встроенный плеер. Для разделения аудио подключение LALAL.AI позволяет извлекать вокал, ударные, бас, фортепиано или гитары из аудиовложений или изолированных диапазонов аудиоклипов аранжировки. Инструмент включает детальные элементы управления областью редактирования (MIDI, Audio, Devices, Mixer, Structure) и три режима подтверждения (Manual, Low Risk, Accept Everything), чтобы дать пользователям точный контроль над изменениями, которые может вносить ИИ. Сеансы сохраняют историю разговоров и действий с их контекстом Live, а встроенные Skills предоставляют рекомендации по музыкальному рабочему процессу для энергии секций, вариаций и ролей инструментов. Вложения поддерживают изображения, документы и аудиофайлы с проверкой возможностей для конкретной модели. Конфиденциальность обеспечивается локальным хранением профилей, сеансов, вложений и учетных данных. Инструмент не выполняет произвольный код, сгенерированный моделью, не просматривает и не редактирует автоматизацию, не просматривает установленные пресеты и не загружает VST по идентификатору плагина. Поддержка сетевого прокси включает режимы No proxy, System proxy и Manual proxy со строгим поведением маршрутизации.