Un movimento corretto sullo schermo non produce necessariamente il risultato corretto. Un pulsante può essere disabilitato, una pagina ancora in caricamento oppure un errore può cambiare il flusso. L’automazione visiva deve chiedersi non solo dove fare clic, ma anche come sapere se l’azione è riuscita.
Osservare e interagire sono compiti distinti
Android offre modalità per acquisire il contenuto dello schermo e meccanismi per esaminare le interfacce e interagire con esse. La documentazione ufficiale descrive separatamente la cattura dello schermo con MediaProjection e le capacità di AccessibilityService. L’uso pratico dipende dalle autorizzazioni, dai vincoli della piattaforma e dalle condizioni dell’applicazione. 12
Questa distinzione è importante per Sara OS: osservare uno stato non deve essere interpretato come autorizzazione a qualsiasi azione. Ogni passaggio richiede il proprio obiettivo, accesso e criterio di successo.
Il ciclo individuare, agire e verificare
Consideriamo un compito illustrativo: raggiungere i dettagli di una richiesta specifica. Prima si conferma che sia aperto l’elenco corretto, poi si seleziona la richiesta desiderata e infine si verifica il suo nome o identificativo nella pagina dei dettagli. Aprire una richiesta diversa non è un successo.
La posizione apparente di un pulsante è solo un segnale. Anche il titolo della pagina, il testo correlato e lo stato dopo l’azione fanno parte della definizione del test. La qualità del riconoscimento va valutata separatamente in ogni applicazione; funzionare su una pagina non dimostra compatibilità con tutte le applicazioni.
Cosa deve accadere quando lo stato è incerto?
Il nostro progetto proposto non riprova all’infinito. I tentativi devono essere limitati e seguiti da un rapporto che spieghi l’arresto. Ripetere azioni come inviare o inoltrare senza controllare il risultato precedente può creare effetti indesiderati.
Per Sara OS, la qualità dell’automazione va giudicata al punto di arrivo: il risultato richiesto è stato raggiunto, esistono prove e l’utente può capire dove si è fermato il processo? Queste domande distinguono una dimostrazione da un flusso affidabile.
