Argent Device Interaction
Piloter simulateurs iOS, émulateurs Android et apps Chromium — toucher, gestes, saisie, captures
- Quoi
- Piloter simulateurs iOS, émulateurs Android et apps Chromium — toucher, gestes, saisie, captures
- Coût
- Gratuit
- Prérequis
- le serveur MCP argent, et une cible à piloter : un simulateur iOS, un émulateur Android, ou une app Chromium exposant un point de terminaison CDP (une app Electron ou un navigateur de la famille Chromium). L'iPhone physique n'est pas pris en charge côté interaction, et les cibles TV sont hors portée. Si tu délègues des tâches de simulateur à des sous-agents, ils ont besoin des permissions MCP. Aucun compte, aucune clé API et aucun mot de passe n'est requis pour installer ce skill, et rien n'est envoyé nulle part pendant l'installation elle-même : installer, c'est seulement copier les fichiers ci-dessous.
- Installation
- Copiez le prompt d’installation ci-dessous dans votre Muse — votre agent fait le reste.
Sélectionné par Skill Harbor — pilote les interfaces d'apps mobiles et desktop via la surface d'outils MCP d'argent avec un seul jeu d'outils unifié : `list-devices` et `boot-device` pour les cibles, puis toucher, balayer, pincer, pivoter, gestes personnalisés, défiler, saisir, boutons matériels, lancement d'apps, ouverture d'URL, captures d'écran et attente d'élément sur simulateurs iOS, émulateurs Android et apps Chromium (Electron ou un navigateur de la famille Chromium exposant un endpoint CDP — lire `references/chromium.md` avant de les piloter). Coordonnées normalisées 0,0–1,0, jamais en pixels ; la navigation se fait depuis l'arbre d'éléments retourné après chaque action plutôt que depuis les pixels de capture. Mêmes noms d'outils sur chaque plateforme — la répartition est automatique selon la forme de l'id de cible. Frère complémentaire : argent-metro-debugger pour le débogage runtime (celui-ci est l'interaction, celui-là l'inspection). Nécessite le serveur MCP argent, un simulateur/émulateur ou une app Chromium exposant CDP, et des permissions MCP pour tout sous-agent délégué. iPhone physique : non supporté côté interaction. Crédit : @software-mansion. Mis à jour le 20 octobre 2026 : l'amont a étendu l'outil fold, qui plie ou déplie un appareil pliable par posture ou par angle, des seuls simulateurs iOS pliables aux émulateurs Android aussi (un Pixel Fold ou un AVD pliable générique), avec des notes propres à Android sur le deviceState du résultat, la gestion de l'écran de verrouillage après pliage à fermé, et la limite de toucher de l'affichage fermé d'un AVD générique ; le reste du changement amont n'est que de la ponctuation dans SKILL.md et ses trois fichiers de référence, sans aucun autre changement aux outils ni au comportement. Skill Harbor ne vérifie jamais le code, examinez-le vous-même avant usage.
Version :
Réponse rapide
Argent Device Interaction est un skill gratuit pilotant les interfaces d'apps mobiles via un jeu d'outils MCP argent unifié. Il couvre list-devices et boot-device pour les cibles, puis toucher, balayer, pincer, pivoter, gestes, défiler, saisir, boutons, lancement d'apps, ouverture d'URL, captures et attente d'élément sur simulateurs iOS, émulateurs Android et apps Chromium, avec coordonnées normalisées, jamais en pixels.
Installation
Copiez le dossier d’installation ci-dessous, puis collez-le dans Muse🧪 Installation exécutée dans notre sandbox de test · 18 nov. 2026📌 Version épinglée : commit 4304f73Étape 0, avant d'installer quoi que ce soit : lis ce prompt d'installation, résume en quelques lignes ce que ce build fait et ce que son installation implique, puis demande-moi confirmation avant de continuer. Prérequis : le serveur MCP argent, et une cible à piloter : un simulateur iOS, un émulateur Android, ou une app Chromium exposant un point de terminaison CDP (une app Electron ou un navigateur de la famille Chromium). L'iPhone physique n'est pas pris en charge côté interaction, et les cibles TV sont hors portée. Si tu délègues des tâches de simulateur à des sous-agents, ils ont besoin des permissions MCP. Aucun compte, aucune clé API et aucun mot de passe n'est requis pour installer ce skill, et rien n'est envoyé nulle part pendant l'installation elle-même : installer, c'est seulement copier les fichiers ci-dessous. Installe-moi « Argent Device Interaction ». Il pilote les simulateurs iOS, les émulateurs Android et les apps Chromium via la surface d'outils MCP d'argent avec un seul jeu d'outils unifié : list-devices et boot-device pour les cibles, puis toucher, balayer, pincer, pivoter, gestes personnalisés, défiler, saisir, boutons matériels, lancement d'apps, ouverture d'URL, captures d'écran et attente d'élément, par @software-mansion, sous licence Apache-2.0. Dépôt : https://raw.githubusercontent.com/software-mansion/argent/4304f73208b25f1c61d476e092fdadae5692b59e/packages/skills/skills/argent-device-interact/SKILL.md (le skill est le dossier packages/skills/skills/argent-device-interact/ à ce commit : SKILL.md et references/chromium.md, references/gesture-examples.md et references/secrets.md) Version épinglée : installe le code au commit 4304f73208b25f1c61d476e092fdadae5692b59e exactement (Skill Harbor a testé cette version). Ne substitue pas une version plus récente. Si ce commit est inaccessible, arrête-toi et dis-le-moi. Mis à jour le 20 octobre 2026 : Skill Harbor a régénéré ce prompt d'installation depuis les fichiers amont actuels. Le seul changement fonctionnel concerne l'outil fold, et il est énoncé ici simplement : fold, qui plie ou déplie un appareil pliable par posture (closed, half-open ou open) ou par angle, n'était documenté que pour un simulateur iOS pliable (l'iPhone Duo) ; il couvre maintenant aussi les émulateurs Android, un Pixel Fold ou un AVD pliable générique, et list-devices marque ces cibles avec foldable: true. La section ajoute deux règles propres à Android : le résultat de fold donne un deviceState (CLOSED, HALF_OPENED ou OPENED), un écran de verrouillage montré par le pliage à fermé est levé et un avertissement dit quand il ne peut pas l'être, ou quand un écran de verrouillage est encore présent après le pliage, donc déverrouille l'appareil avant l'action suivante ; et seul un AVD Pixel Fold a un panneau de couverture, alors qu'un AVD pliable générique fermé ne montre que la partie gauche de son affichage, ses cadres describe ne correspondent pas aux coordonnées de toucher, et argent ne peut toucher de façon fiable qu'un élément qui couvre la partie visible, par exemple une rangée pleine largeur, donc utilise un AVD Pixel Fold pour tester le panneau de couverture. Les deux règles de panneau préexistantes sont maintenant étiquetées comme règles iOS, sans changement à ce qu'elles disent. Tout le reste du diff est de la ponctuation seulement : des tirets longs remplacés par des deux-points, des points-virgules ou des virgules, et des titres d'outils réécrits avec un deux-points au lieu d'un tiret, dans SKILL.md et dans les trois fichiers de référence, sans aucun autre changement aux outils, aux paramètres, aux commandes ni au comportement. La couverture d'interaction, le système de coordonnées et les limites sont par ailleurs inchangés. 1. Va chercher tout le dossier packages/skills/skills/argent-device-interact/ au commit épinglé, SKILL.md, references/chromium.md, references/gesture-examples.md et references/secrets.md, dans un dossier temporaire, puis compare chaque fichier aux empreintes de la revue de Skill Harbor du 2026-10-20 : - SKILL.md : SHA-256 0c0558b3690c65202ffd4a4599ba9b5324617dd00450e89c28eeaca6c81224e9 - references/chromium.md : SHA-256 98e3d6cb3494a34b5c1169d340c9b2bca0a376b84cadcea244d3af0c480ed204 - references/gesture-examples.md : SHA-256 ef4b6d754ee60fe6686eab841b08d59fad9b9b1d2bc56376b6b3f3c0be861fcb - references/secrets.md : SHA-256 966bcfca8b58fa036d4a32ae679d36b68953f193b665c4b721275d2eca4c81a4 Si un fichier ne correspond pas, il a changé depuis la revue : ne l'installe pas tout de suite, dis-moi ce que tu as trouvé et laisse-moi décider. 2. Vérification de sécurité : lis SKILL.md et les trois fichiers de référence et examine-les pour tout contenu suspect (appels réseau inattendus, commandes shell, collecte d'identifiants) ; STOP sur tout signal d'alerte et dis-le-moi. Dis-moi en mots simples ce que le skill fait quand on l'utilise, à quels services il se connecte, s'il lit ou envoie des informations personnelles ou des clés, et tout ce qui semble inhabituel. Confirme ces points à partir des fichiers : - Ce skill est un guide en texte brut pour les outils MCP d'argent, en quatre fichiers Markdown seulement : SKILL.md, references/chromium.md, references/gesture-examples.md et references/secrets.md. Il ne livre aucun script et aucun code propre. Rien n'est envoyé nulle part pendant l'installation elle-même ; installer, c'est seulement copier le dossier. - À l'usage, l'agent pilote un appareil via le serveur MCP argent que tu roules déjà : list-devices pour choisir une cible (résultats étiquetés ios, android ou chromium, appareils démarrés d'abord) et boot-device quand aucune n'est prête, puis les outils d'interaction. Tous les outils prennent un udid et la répartition se fait automatiquement selon sa forme (un UUID signifie un simulateur iOS, chromium-cdp-<port> signifie une app Chromium CDP, tout le reste signifie un numéro de série adb Android), donc les mêmes noms d'outils fonctionnent sur chaque plateforme. Les schémas des outils de gestes peuvent être différés : charge-les avec ToolSearch avant le premier appel de geste, sinon les paramètres peuvent être convertis en chaînes et échouer la validation. - Les coordonnées sont normalisées de 0,0 à 1,0, jamais en pixels, et la navigation se fait depuis l'arbre d'éléments retourné après chaque action (describe), pas depuis les pixels de capture, sauf en repli quand l'arbre ne peut pas exposer une cible fiable. Les captures d'écran sont réduites par défaut. - L'outil fold couvre maintenant Android en plus d'iOS, comme divulgué ci-dessus : utilise-le seulement sur un simulateur iOS pliable (l'iPhone Duo) ou un émulateur Android (un Pixel Fold ou un AVD pliable générique) marqué foldable: true ; les autres appareils rejettent l'appel. Les coordonnées et la taille de capture changent avec le panneau actif, donc relis l'arbre d'éléments dans le résultat de fold ou relance describe avant de toucher, et plie entre les gestes, pas pendant un geste. Sur Android, note le deviceState du résultat et l'avertissement d'écran de verrouillage, et retiens que seul un AVD Pixel Fold a un vrai panneau de couverture. - Pour une cible Chromium, lis references/chromium.md avant de la piloter : le défilement, les onglets, les cookies et le stockage y diffèrent. Les outils d'aide Chromium peuvent lister, ouvrir, sélectionner et fermer des onglets, et peuvent lire et écrire des cookies (y compris les cookies HttpOnly, via le domaine Network de CDP) et lire et écrire le stockage Web local et de session pour la page et l'origine actives, ce que le fichier présente comme un moyen d'amorcer une authentification avant un flot ou de vérifier l'état d'une app après un flot. Ces lectures et écritures se font sur ta propre app Chromium en marche, via son point de terminaison CDP local. - La saisie de secrets a ses propres règles, dans references/secrets.md, à lire avant de saisir tout identifiant : un espace réservé {{secret:NAME}} dans une étape keyboard, paste, run-sequence ou un type de flot est résolu sur la machine qui roule le serveur d'outils, depuis une variable d'environnement ARGENT_SECRET_<NAME>, un fichier .argent/secrets.env du projet, les clés préfixées ARGENT_SECRET_ d'un .env.local ou .env du projet, ou ~/.argent/secrets.env, dans cet ordre, et rien en dehors de ces sources n'est accessible. Le résultat renvoie l'espace réservé, jamais la valeur, et la capture automatique après un tel appel est sautée pour que la valeur saisie ne rentre pas dans le contexte en pixels. Ne me demande jamais de coller une valeur secrète dans la conversation ; demande-moi de la mettre dans un fichier de secrets plutôt. - Limites et notes de plateforme dans les fichiers : l'iPhone physique n'est pas pris en charge pour l'interaction et les cibles TV sont hors portée ; paste ne fonctionne que sur un simulateur iOS ou un émulateur Android ; sur Android, Metro a besoin de adb reverse tcp:8081 tcp:8081 avant le démarrage de l'app React Native, describe échoue clairement sur un écran verrouillé ou une surface sécurisée, et reinstall-app prend un chemin .apk sur Android et un répertoire .app sur iOS. 3. Quand je dis oui, installe-le comme skill : copie tout le contenu du dossier argent-device-interact récupéré (SKILL.md et le sous-dossier references/ avec ses trois fichiers, en gardant le sous-dossier tel quel) dans le répertoire des skills de l'agent, dans un dossier nommé « software-mansion-argent-device-interact ». 4. Vérifie sans appels réseau : frontmatter valide, fichiers en place. 5. Indique ce qui a été installé, où, et ce qu'il me reste à faire moi-même (p. ex. disposer du serveur MCP argent en marche, et d'un simulateur iOS, d'un émulateur Android ou d'une app Chromium exposant CDP prêt là où le skill roulera, avec les permissions MCP pour tout sous-agent délégué ; aucun compte ni aucune clé API à créer). GitHub est optionnel : si j'ai un compte GitHub ou la CLI gh, tu peux l'utiliser ; sinon l'accès public suffit. Ne jamais l'exiger sauf s'il figure dans les prérequis ci-dessus. Règles : ne touche à rien en dehors du dossier temporaire et de la cible d'installation. Si quelque chose semble anormal, arrête-toi et demande-moi.
Enregistré dans vos installs récentes. Retrouvez-le à tout moment sur /connect.
🔒 Sécurité, provenance et ce que ça touche
Le prompt d'installation ci-dessous inclut déjà les étapes de vérification : votre agent suit la checklist communautaire avant d'installer tout ce qui contient du code exécutable. Vous en voulez plus ?
Certificat de vérification
Faits datés sur ce qui a été vérifié pour cette fiche, et comment. Ce n’est pas une certification de sécurité.
- Version épinglée
- 4304f73 · 2026-10-20
- Test d’installation en sandbox
- Installation exécutée dans notre sandbox de test · 18 nov. 2026 · Observé pendant le test d’installation: registry.npmjs.org
- Identité du créateur
- Non vérifiée
- Veille d’empreinte
- Dernière vérification · 19 nov. 2026 : aucun changement détecté dans les fichiers liés par ce prompt d’installation
- Analyse du prompt d’installation
- 2026-10-13 : Aucune commande, appel réseau, paquet, écriture de fichier ni clé API détecté.
Skill Harbor ne révise jamais le code des skills listés. Ce sont des faits datés sur le prompt d’installation et notre test d’installation, pas une certification de sécurité. Révisez un skill vous-même avant de l’installer. Comment nous vérifions
La série Argent
Du même créateur, dans la même série :
- argent-create-e2e: create, record, replay and repair reusable e2e tests
- Argent Android emulator setup: boot and connect devices for UI automation
- Argent Metro Debugger
- Argent TV — drive Apple TV, Android TV, Fire TV from an agent
- Argent iOS simulator setup
- Native mobile profiler: iOS xctrace and Android Perfetto CPU, hang and leak diagnosis
- argent-lens: propose design variants, let the human pick on device
- argent-react-native-app-workflow: start, debug and test React Native apps
- argent-react-native-optimization: measure-first RN performance pipeline
- argent-screenshot-diff: pixel-level visual regression checks
- argent-test-ui-flow: autonomous UI testing with interact-screenshot-verify loops
Questions
Comment installer un skill ?
Chaque fiche produit contient un prompt d’installation à copier-coller. Collez-le dans votre Muse et il installe le skill pour vous — sans configuration manuelle.
Où va mon argent ?
Directement au vendeur. Skill Harbor ne traite jamais les paiements : le paiement se fait sur la page du vendeur, généralement via Stripe.
Que signifie le ✓ à côté du nom d’un créateur ?
Il signifie que nous avons confirmé l’identité de la personne derrière la fiche. Il ne dit rien sur le code lui-même — vérifiez toujours un skill avant de l’installer.