Клики — это AI-ассистент, который видит ваш экран и помогает с выполнением задач, показывая, куда кликнуть. Он объединяет голосовые команды и визуальные подсказки, что значительно упрощает процесс обучения и работы с программами.
Clicky: AI-ассистент, который видит ваш экран и показывает пальцем
полный разбор ролика · 5 глав ↓
Введение в Клики
Клики — это AI-ассистент, который помогает пользователям, видя их экран и показывая, куда кликнуть. Он решает проблему переключения между инструкциями и действиями, предоставляя поддержку в реальном времени.
Как работает Клики
Клики активируется голосом, превращая команды в текст и анализируя их с помощью языковой модели. Он не просто отвечает, а указывает на элементы интерфейса, что делает взаимодействие более интуитивным.
Подготовка к запуску
Для запуска Клики необходимы MacOS, Xcode, Node JS и API ключи от нескольких сервисов. Есть два способа установки: через cloud code или ручной способ для тех, кто хочет больше контроля.
Ограничения Клики
Клики — это open source проект с ограничениями, такими как эксклюзивность для MacOS и платные API. Также требуется знание Swift для модификации кода, что может быть препятствием для некоторых пользователей.
Будущее обучения
Клики может изменить подход к обучению и использованию программ, ставя под сомнение необходимость традиционных статичных инструкций. Это открывает новые горизонты для обучения и взаимодействия с технологиями.