Dopasuj obraz, a potem kliknij
Znajdź na ekranie wskazany przycisk, ikonę lub obraz i kliknij go automatycznie. Flow podąża za dopasowanym celem, nawet gdy zmienia się jego położenie.
LaiCai Flow w LaiCai Screen Mirroring
Automatyzacja Androida z AI
Otwieraj aplikacje, znajduj przycisk lub tekst na ekranie i powtarzaj potrzebne kroki. LaiCai Flow to funkcja automatyzacji w LaiCai Screen Mirroring: zbuduj zapisywany scenariusz wizualnie, z pomocą AI, gdy zadanie tego wymaga.
Bez programowaniaWęzły „przeciągnij i upuść”Obsługa modeli AIAI Planner i MCPFlow Profile wielokrotnego użytku
Pierwsze kroki
Zbuduj zadanie na Androidzie, które uruchomisz ponownie
Zacznij od małego zadania, na przykład otwarcia aplikacji, znalezienia widocznego przycisku, dotknięcia go i sprawdzenia kolejnego ekranu.
- 01
Zainstaluj LaiCai Screen Mirroring w systemie Windows lub macOS, podłącz telefon z Androidem lub obsługiwany emulator i sprawdź, czy widzisz jego ekran i możesz nim sterować.
- 02
Otwórz LaiCai Flow i utwórz scenariusz. Przeciągnij potrzebne akcje albo użyj AI Planner lub MCP, aby przygotować wersję roboczą na podstawie opisu zadania.
- 03
Wybierz sposób znajdowania celu: zapisany obraz przycisku, rozpoznawanie tekstu, element interfejsu Android lub skonfigurowany model wykrywania. Przechwyć lub skonfiguruj dane wejściowe potrzebne w zadaniu.
- 04
Połącz akcję ze sprawdzeniem wyniku. Zdecyduj, co ma się stać, jeśli cel nie zostanie znaleziony, aby zadanie nie kontynuowało przypadkowym dotknięciem.
- 05
Uruchom zadanie na jednym urządzeniu. Sprawdź rzeczywisty ekran, zrzuty ekranu, wyniki węzłów i logi uruchomienia, aby potwierdzić, że osiągnięto oczekiwany wynik.
- 06
Zapisz Flow Profile i uruchom go ponownie od tego samego stanu początkowego. Dostosuj dane wejściowe i sprawdzanie ekranu, zanim użyjesz scenariusza na innych telefonach lub instancjach emulatora.
Przepływ pracy
Automatyzuj akcje zależne od ekranu
Odczytuj i analizuj tekst na ekranie
Odczytuj komunikaty na stronie, status zamówienia, zawartość formularzy lub wyniki wyszukiwania, a potem używaj tekstu do podejmowania decyzji, klasyfikacji lub przejścia do kolejnego kroku.
Powtarzaj stałe akcje
Połącz w Flow akcje takie jak otwarcie aplikacji, dotknięcie, wpisanie tekstu, przesunięcie i oczekiwanie, a potem zapisz go i uruchamiaj te same kroki, kiedy tylko potrzebujesz.
Testy automatyczne aplikacji na Androida
Automatycznie wykonuj kroki w interfejsie, weryfikuj przyciski, tekst i wyniki, a następnie zachowuj zrzuty ekranu i logi uruchomień do testowania aplikacji i testów regresyjnych.
Porównanie automatyzacji
Wybierz narzędzie do automatyzacji Androida dla swojego zadania
| Twoje zadanie | LaiCai Flow | Agenci AI | Makra i skrypty | Frameworki testowe |
|---|---|---|---|---|
| Tworzenie zadania | Łącz węzły wizualne; AI Planner lub MCP mogą pomóc je skonfigurować. | Opisz zadanie; możliwości agenta wyznaczają obsługiwane przez niego narzędzia. | Nagraj polecenia albo zapisz akcje i warunki. | Pisz i utrzymuj testy z użyciem mechanizmów sterowania urządzeniem dostępnych we frameworku. |
| Sprawdzanie ekranu | Dopasowywanie obrazów, OCR, elementy interfejsu lub skonfigurowany model AI. | Dostęp do ekranu i narzędzi zależy od agenta. | Stałe odtwarzanie powtarza polecenia; skrypty mogą dodać sprawdzanie, jeśli je zaimplementujesz. | Asercje elementów i sprawdzanie obrazów zależą od frameworka i konfiguracji. |
| Powtarzanie i analiza | Zapisz Flow Profile, używaj ponownie danych wejściowych i przeglądaj logi uruchomień oraz zrzuty ekranu. | Harmonogramy, powtarzalność i logi różnią się w zależności od produktu. | Używaj ponownie nagrań lub kodu; aktualizuj je, gdy aplikacja się zmieni. | Używaj ponownie zestawów testów i przeglądaj raporty z testów. |
| Dobry punkt wyjścia | Powtarzalne zadanie na Androidzie, które chcesz zbudować wizualnie. | Zadanie, w którym przydają się decyzje podejmowane przez model. | Stała sekwencja lub scenariusz, który wolisz utrzymywać w kodzie. | Zespół inżynierów budujący zestaw testów automatycznych. |
Często zadawane pytania
Narzędzie do automatyzacji Androida: FAQ
Czym jest LaiCai Flow?
LaiCai Flow to funkcja automatyzacji Androida w LaiCai Screen Mirroring. Tworzysz zapisany proces, łącząc wizualne węzły akcji, sprawdzania ekranu, warunków i danych zadania. Obsługuje konfigurację wspomaganą przez AI oraz opcjonalne modele AI w działającym procesie.
Przewodnik po LaiCai FlowCzy do każdego zadania potrzebuję umiejętności programowania lub modelu AI?
Nie. Flow możesz tworzyć, przeciągając i łącząc węzły bez pisania kodu. AI Planner i MCP mogą pomóc skonfigurować wersję roboczą, a węzły AI działające w trakcie wykonania to osobny wybór. Podstawowe akcje i dopasowanie szablonu nie wymagają LLM; kroki OCR, wykrywania lub LLM wymagają skonfigurowania odpowiedniego silnika lub modelu.
Czy Flow może znaleźć przycisk, odczytać tekst lub rozpoznać obiekt?
Tak. Użyj zapisanego obrazu do dopasowania szablonu, OCR do odczytu obszaru ekranu albo elementów UI Androida, gdy aplikacja je udostępnia. Do wykrywania obiektów skonfiguruj obsługiwany lokalny model YOLO/ONNX. Sprawdź wynik w swojej aplikacji, zanim połączysz go z dotknięciem.
Zobacz węzły rozpoznawaniaCzy model AI może analizować obrazy ekranu i tekst?
Tak. Analiza tekstu może korzystać z OCR, API, pliku lub wyników wcześniejszych kroków. Model z obsługą obrazu może przeanalizować przechwycony obraz ekranu i zwrócić ustrukturyzowane dane do późniejszej decyzji. Skonfiguruj model i sprawdź jego wynik, zanim na nim polegasz.
Jakie czynności mogę zautomatyzować na telefonie z Androidem?
Flow może dotykać, przesuwać, przytrzymywać, przeciągać, wpisywać tekst, wysyłać klawisze, korzystać ze schowka, otwierać lub zatrzymywać aplikacje oraz przechodzić do ekranu głównego lub wstecz. Łącz to z oczekiwaniem, warunkami, pętlami i podrzędnymi Flow wielokrotnego użytku. Częścią procesu mogą być też żądania HTTP, polecenia ADB, skrypty AutoJS, zapisane makra, pliki i przechowywane dane.
Czy mogę uruchomić tę samą automatyzację na wielu telefonach lub emulatorach?
Zapisany Flow Profile możesz wykorzystać ponownie na obsługiwanych urządzeniach z Androidem. Najpierw sprawdź zadanie na jednym urządzeniu, a potem na każdym kolejnym zweryfikuj stan aplikacji, układ ekranu, zasoby i dane wejściowe. Flow, który działa na jednym ekranie, nie jest automatycznie sprawdzony na każdym telefonie.
Steruj wieloma telefonami z AndroidemCzy komputer musi pozostać podłączony?
W przypadku LaiCai Flow tak: logika i analiza obrazu działają na komputerze, który wysyła akcje do podłączonego telefonu. Dla zgodnych procesów, które mają działać samodzielnie na telefonie, użyj LaiCai Flow Inside z LaiCai Android Agent. Kroki zależne od sieci nadal wymagają dostępu do sieci.
Przewodnik po LaiCai Flow InsideCzy Flow może wypowiedzieć wynik lub przypomnienie głosowe?
Tak. Akcja mowy korzysta z lokalnego silnika mowy na komputerze, na którym działa LaiCai. Może tam odczytać na głos przypomnienie lub wynik; nie sprawia, że mówi telefon z Androidem.