Reconnaître une image, puis cliquer
Trouvez à l’écran un bouton, une icône ou une image précise et cliquez dessus automatiquement. Le Flow suit la cible reconnue même si sa position change.
LaiCai Flow dans LaiCai Screen Mirroring
Automatisation Android avec l’AI
Ouvrez des applications, trouvez un bouton ou un texte à l’écran et répétez les étapes dont vous avez besoin. LaiCai Flow est la fonction d’automatisation de LaiCai Screen Mirroring : créez visuellement un workflow enregistré, avec l’aide de l’AI quand votre tâche le demande.
Aucune programmation requiseNœuds en glisser-déposerPrise en charge des modèles AIAI Planner et MCPFlow Profiles réutilisables
Bien démarrer
Créez une tâche Android que vous pouvez relancer
Commencez par une petite tâche : ouvrir une application, trouver un bouton visible, appuyer dessus et vérifier l’écran suivant.
- 01
Installez LaiCai Screen Mirroring sur Windows ou macOS, connectez un téléphone Android ou un émulateur compatible et vérifiez que vous pouvez voir et contrôler son écran.
- 02
Ouvrez LaiCai Flow et créez un workflow. Faites glisser les actions dont vous avez besoin, ou utilisez AI Planner ou MCP pour préparer un brouillon à partir de la description de votre tâche.
- 03
Choisissez comment trouver la cible : une image de bouton enregistrée, la reconnaissance de texte, un élément d’interface Android ou un modèle de détection configuré. Capturez ou configurez les entrées nécessaires à votre tâche.
- 04
Reliez l’action et la vérification du résultat. Décidez de ce qui doit se passer si la cible est absente, pour que la tâche ne continue pas avec un appui hors sujet.
- 05
Exécutez la tâche sur un appareil. Examinez l’écran réel, les captures d’écran, les résultats des nœuds et les journaux d’exécution pour confirmer qu’elle a atteint le résultat attendu.
- 06
Enregistrez le Flow Profile et relancez-le depuis le même état de départ. Ajustez les entrées et les vérifications d’écran avant de réutiliser le workflow sur d’autres téléphones ou instances d’émulateur.
Flux de travail
Automatisez des actions qui dépendent de l’écran
Lire et analyser le texte à l’écran
Lisez les messages d’une page, le statut d’une commande, le contenu d’un formulaire ou des résultats de recherche, puis utilisez ce texte pour décider, classer ou passer à l’étape suivante.
Répéter des actions fixes
Enchaînez dans un Flow des actions comme ouvrir une application, appuyer, saisir du texte, balayer et attendre, puis enregistrez-le pour relancer les mêmes étapes quand vous le souhaitez.
Tests automatisés d’applications Android
Exécutez automatiquement des étapes d’interface, vérifiez les boutons, les textes et les résultats, puis conservez les captures d’écran et les journaux d’exécution pour les tests d’applications et de non-régression.
Comparatif d’automatisation
Choisissez un outil d’automatisation Android adapté à votre tâche
| Votre tâche | LaiCai Flow | Agents AI | Macros et scripts | Frameworks de test |
|---|---|---|---|---|
| Créer la tâche | Reliez des nœuds visuels ; AI Planner ou MCP peut aider à les configurer. | Décrivez une tâche ; les outils pris en charge par l’agent déterminent ce qu’il peut faire. | Enregistrez des saisies ou écrivez les actions et les conditions. | Écrivez et maintenez des tests avec les commandes d’appareil du framework. |
| Vérifier l’écran | Utilisez la reconnaissance d’image, l’OCR, les éléments d’interface ou un modèle AI configuré. | L’accès à l’écran et aux outils dépend de l’agent. | La relecture fixe répète les saisies ; les scripts peuvent ajouter des vérifications si vous les implémentez. | Les assertions sur les éléments et les vérifications d’image dépendent du framework et de la configuration. |
| Répéter et inspecter | Enregistrez un Flow Profile, réutilisez les entrées et consultez les journaux d’exécution et les captures d’écran. | La planification, la répétabilité et les journaux varient selon le produit. | Réutilisez les enregistrements ou le code ; mettez-les à jour quand l’application change. | Réutilisez les suites de tests et consultez les rapports de test. |
| Point de départ conseillé | Une tâche Android répétable que vous voulez créer visuellement. | Une tâche qui gagne à s’appuyer sur les décisions d’un modèle. | Une séquence stable ou un workflow que vous préférez maintenir en code. | Une équipe d’ingénierie qui construit une suite de tests automatisés. |
FAQ
FAQ sur l’outil d’automatisation Android
Qu’est-ce que LaiCai Flow ?
LaiCai Flow est une fonction d’automatisation Android intégrée à LaiCai Screen Mirroring. Vous créez un workflow enregistré en reliant des nœuds visuels pour les actions, les vérifications d’écran, les conditions et les données de tâche. Il propose une configuration assistée par IA et des modèles d’IA optionnels pendant l’exécution d’un workflow.
Guide LaiCai FlowFaut-il savoir programmer ou utiliser un modèle d’IA pour chaque tâche ?
Non. Vous créez des workflows en glissant et reliant des nœuds, sans écrire de code. AI Planner et MCP peuvent aider à préparer un brouillon, tandis que les nœuds d’IA à l’exécution sont un choix distinct. Les actions de base et la correspondance d’image n’ont pas besoin de LLM ; les étapes OCR, de détection ou LLM nécessitent le moteur ou le modèle correspondant.
Un workflow peut-il trouver un bouton, lire du texte ou reconnaître un objet ?
Oui. Utilisez une image enregistrée pour la correspondance d’image, l’OCR pour lire une zone de l’écran, ou les éléments d’interface Android quand l’app les expose. Pour la détection d’objets, configurez un modèle YOLO/ONNX local compatible. Vérifiez le résultat dans votre app réelle avant de le relier à un toucher.
Voir les nœuds de reconnaissanceUn modèle d’IA peut-il analyser des images d’écran et du texte ?
Oui. L’analyse de texte peut utiliser l’OCR, une API, un fichier ou les résultats d’étapes précédentes. Un modèle doté de vision peut analyser une capture d’écran et renvoyer des données structurées pour une décision ultérieure. Configurez le modèle et contrôlez sa sortie avant de vous y fier.
Quelles actions puis-je automatiser sur un téléphone Android ?
Les workflows peuvent toucher, balayer, appuyer longuement, faire glisser, saisir du texte, envoyer des touches, utiliser le presse-papiers, ouvrir ou arrêter des apps et revenir à l’accueil ou en arrière. Combinez-les avec des attentes, des conditions, des boucles et des sous-workflows réutilisables. Requêtes HTTP, commandes ADB, scripts AutoJS, macros enregistrées, fichiers et données stockées peuvent aussi faire partie d’un workflow.
Puis-je exécuter la même automatisation sur plusieurs téléphones ou émulateurs ?
Vous pouvez réutiliser un Flow Profile enregistré sur les appareils Android compatibles. Vérifiez d’abord la tâche sur un appareil, puis contrôlez l’état de l’app, la disposition de l’écran, les ressources et les entrées sur chaque appareil supplémentaire. Un workflow qui fonctionne sur un écran n’est pas automatiquement validé sur tous les téléphones.
Contrôler plusieurs téléphones AndroidL’ordinateur doit-il rester connecté ?
Pour LaiCai Flow, oui : la logique et l’analyse d’image s’exécutent sur l’ordinateur, qui envoie les actions au téléphone connecté. Pour les workflows compatibles qui doivent tourner seuls sur le téléphone, utilisez LaiCai Flow Inside avec LaiCai Android Agent. Les étapes qui dépendent du réseau nécessitent toujours un accès réseau.
Guide LaiCai Flow InsideUn workflow peut-il annoncer un résultat ou un rappel vocal ?
Oui. L’action vocale utilise le moteur de synthèse vocale local de l’ordinateur qui exécute LaiCai. Elle lit un rappel ou un résultat à voix haute sur cet ordinateur ; elle ne fait pas parler le téléphone Android.