AGENT SKILL

screen_elements

Analyse sémantique complète de l'écran — retourne tous les éléments UI interactifs, les apps en cours, la résolution et une vue structurée par rôle

License 许可
MIT
所属仓库
AMFbot-Gz/LaRuche
最近更新
2026-03-19
Stars
★ 0
Forks
1

01 前言 Front Matter

name
screen_elements
tags
[ "accessibility", "semantic", "screen", "computer-use", "ui", "perception" ]
version
1.0.0
description
Analyse sémantique complète de l'écran — retourne tous les éléments UI interactifs, les apps en cours, la résolution et une vue structurée par rôle

02 资源文件 3

03 SKILL.md 正文

screen_elements

Vue d'ensemble sémantique de l'écran actuel. Combine :

  • AX tree de l'app de premier plan
  • Infos système (résolution, apps actives)
  • Groupement par rôle (buttons, text_fields, etc.)

Params

  • app (string, optionnel) : app à analyser. Défaut: app de premier plan

Retour

{
  "success": true,
  "frontmost_app": "Safari",
  "elements_count": 12,
  "elements_by_role": { "button": ["Envoyer", "Annuler"], "text_field": ["Recherche"] },
  "interactive": [...]
}

04 同仓库更多 Skills