Об этом проекте

Automation Companion — это Android-приложение, предназначенное для предоставления пользователям возможности создавать сложные автоматизации на своих устройствах без необходимости получения root-доступа. Придерживаясь офлайн-ориентированной архитектуры, основные функции полностью работают на устройстве, обеспечивая конфиденциальность и скорость, а также предлагая опциональные интеграции с облачными API для расширенного интеллекта. Приложение поддерживает широкий спектр методов автоматизации. Пользователи могут записывать и воспроизводить жесты, такие как касания, свайпы и ввод текста, с помощью сервисов специальных возможностей Android. Для более сложных задач предоставляется визуальный редактор рабочих процессов на основе узлов, который позволяет перетаскивать соединения, условное ветвление и выполнение нескольких узлов. Кроме того, приложение использует встроенное машинное обучение (TensorFlow Lite и ML Kit) для понимания экрана, что обеспечивает такие функции, как распознавание текста OCR, распознавание элементов интерфейса и сопоставление шаблонов изображений. Эти возможности поддерживают визуальные триггеры, которые могут выполнять действия при появлении на экране определенных шаблонов. Помимо ручного создания, Automation Companion включает надежные системные контекстные триггеры. Автоматизации могут активироваться на основе местоположения (геозоны), уровня заряда батареи, времени суток, подключения к Wi-Fi или при открытии определенных приложений. Приложение также включает "Omni-Chatbot" и возможности семантической автоматизации, позволяя пользователям определять задачи на естественном языке, которые могут обрабатываться локальными LLM или подключенными облачными API, такими как OpenAI, Gemini или Groq. Технически проект построен на Kotlin и Jetpack Compose, следуя модульной архитектуре MVVM. Он включает инструменты для отладки автоматизаций в реальном времени и поддерживает автоматизацию на нескольких устройствах через локальную синхронизацию по Wi-Fi между телефонами, планшетами и ПК. Приложение лицензировано в соответствии с PolyForm Noncommercial License 1.0.0.