ScreenSeek

ScreenSeek — это легковесный, не требующий дополнительных зависимостей инструмент для анализа экрана Android. Он позволяет пользователям выбирать и обрезать любую область экрана с помощью интерактивного режима «Ножницы», не переключаясь с текущего приложения.

Выбранный фрагмент изображения отправляется напрямую в API Google Gemini Vision, а сгенерированный ответ отображается в виде удобной плавающей карточки.

Для работы ScreenSeek не требуется отдельный бэкэнд или промежуточный сервер. API-запросы отправляются напрямую с устройства в Google с использованием собственного ключа API Gemini пользователя.

Функции

Выбор области экрана — Выберите произвольные прямоугольные области текущего экрана с помощью интерактивного наложения.

Интеграция с быстрыми настройками — запускайте процесс выбора экрана непосредственно из панели быстрых настроек Android.

Прямая интеграция с API Gemini — обеспечивает прямую связь с API Gemini от Google без использования стороннего промежуточного программного обеспечения.

Используйте собственный API-ключ — пользователи предоставляют и управляют своими собственными учетными данными API Gemini локально в приложении.

Реализация нативного Android — создана с использованием Android SDK и Java без AndroidX или внешних фреймворков пользовательского интерфейса. Форматирование ответов — обрабатывает ответы Gemini и преобразует базовый формат Markdown в читаемый вывод приложения.

Прогрессивные состояния обработки — Обеспечивают визуальную обратную связь на протяжении всего процесса захвата, загрузки и анализа данных.

Интеграция с буфером обмена — позволяет копировать сгенерированные ответы непосредственно в системный буфер обмена.

Встроенный интерфейс наложенияWindowManager использует интерфейс выбора на экране и плавающее отображение результатов, аналогичные тем, что используются в Android.

Минимальное количество зависимостей — проект избегает ненужных зависимостей от сторонних разработчиков и в основном опирается на API фреймворка Android.

Настройка и использование

Конфигурация

Запустите ScreenSeek. Введите свой ключ API Google Gemini. Сохраните ключ API. Предоставьте разрешение на отображение поверх других приложений. Предоставляйте разрешение на создание снимков экрана по запросу.

Быстрая настройка параметров

Добавьте плитку ScreenSeek в быстрые настройки Android:

Откройте панель быстрых настроек. Нажмите кнопку «Редактировать». Добавьте функцию ScreenSeek к активным плиткам.

Использование ScreenSeek

Активируйте функцию ScreenSeek через плитку «Быстрые настройки» или в приложении. Перетащите курсор по экрану, чтобы выбрать контент, который хотите проанализировать. Подтвердите выбранный регион. Функция ScreenSeek обрезает выбранную область из захваченного кадра. Изображение отправляется напрямую в Gemini для анализа. Сгенерированный ответ отображается в виде плавающей карточки с результатом. Используйте функцию «Буфер обмена», чтобы скопировать ответ при необходимости.