Apple Vision Pro
Lancez, recopiez et contrôlez des simulateurs d'Apple Vision Pro sous visionOS 27 dans Device MCP, en regardant et en pinçant à la souris, et laissez votre agent IA tester votre app visionOS avec les mêmes outils MCP.
Device MCP recopie et contrôle les simulateurs d'Apple Vision Pro comme un simulateur d'iPhone : dans la même barre latérale, dans leur propre cadre, et avec les mêmes outils MCP pour votre agent IA. visionOS se commande par un regard et un pincement plutôt que par un toucher : c'est donc ce que devient un clic. Rien n'est installé dans le simulateur.
1. Prérequis
- Xcode sur votre Mac, avec un runtime de simulateur visionOS 27. Ajoutez-en un dans Xcode → Settings → Components.
- Des simulateurs d'Apple Vision Pro sous visionOS 27 ou version ultérieure.
- Uniquement des simulateurs d'Apple Vision Pro. Device MCP ne recopie pas un vrai Apple Vision Pro.
2. Lancer un simulateur d'Apple Vision Pro
- Cliquez sur + en haut de la barre latérale, puis choisissez New Simulator → Apple Vision Pro.
- Cliquez sur Start. Device MCP démarre le simulateur et affiche sa vue dès qu'il est prêt.
Les simulateurs d'Apple Vision Pro sont listés, démarrés et éteints comme les simulateurs iPhone, avec une icône de casque dans la barre latérale. Consultez Simulateur iOS.
3. Recopier et contrôler
- Ce que voit la personne qui le porte : la recopie affiche la vue du simulateur, sans perte en 3840 × 2160 et à environ 60 images par seconde, dans un fin cadre aux coins arrondis.
- Cliquer pour regarder et pincer : Device MCP regarde le point sur lequel vous avez cliqué, puis pince. Faites glisser pour pincer et déplacer la main : ce que vous avez pincé suit le mouvement, si bien que faire glisser fait défiler le contenu d'une fenêtre.
- Clavier : cliquez sur la recopie, puis saisissez du texte dans le champ qui a le focus.
- Digital Crown : cliquez sur Home dans la barre d'outils, ou appuyez sur ⇧⌘H, pour l'enfoncer et ouvrir la vue Accueil.
- Captures d'écran et enregistrement : consultez Captures d'écran et enregistrement.
4. Avec un agent IA
Votre agent utilise un simulateur d'Apple Vision Pro via le même serveur MCP qu'un iPhone :
tapregarde un point et pince.swipe,scrolletdragpincent et déplacent la main.list_elementslit le texte à l'écran : visionOS place ses fenêtres en 3D, l'écran est donc lu comme une personne le voit, et votre agent touche ces mots avectap_text.press_button homeenfonce la Digital Crown.launch_appouvre les apps. Les icônes de la vue Accueil s'éclairent sous le regard mais ne réagissent pas au pincement : votre agent ouvre donc les apps par leur nom.start_simulatordémarre ou crée un simulateur d'Apple Vision Pro.
✅ Exemples de prompts
- Lance le simulateur d'Apple Vision Pro et fais une capture d'écran.
- Ouvre mon app sur le simulateur de Vision Pro, trouve l'émission de cuisine et ajoute-la à Up Next.
- Sur le Vision Pro, ouvre Réglages › Accessibilité et fais défiler jusqu'à Parole.
5. Différences avec un iPhone
- Regarder et pincer, pas toucher : un pincement atteint les lignes de liste et les liens dans la fenêtre d'une app. Les boutons hors d'une liste s'éclairent sous le regard mais ne réagissent pas encore au pincement. Si une commande dont vous avez besoin ne réagit pas, dites-le-nous.
- Pas d'arbre d'accessibilité : votre agent lit plutôt les mots à l'écran, et touche ces mots ou leur position.
- Ni rotation, ni sélecteur d'apps, ni centre de contrôle, ni verrouillage, ni boutons de volume : la Digital Crown est le seul bouton sur lequel Device MCP appuie sur un Vision Pro.
- Ni onglet Settings, ni barre d'état épurée : visionOS n'a pas de mode clair vers lequel basculer. Modifiez un réglage dans l'app Réglages du simulateur lui-même.
- Démarrage en version complète : les simulateurs allégés ne concernent qu'iOS et watchOS.