Recentemente stavo sviluppando uno strumento di controllo vocale globale per Mac, principalmente per facilitare il mio lavoro quotidiano, senza dover continuamente copiare e incollare o passare da un'interfaccia di dialogo di un agente all'altra per gestire compiti diversi. Ho impiegato molto tempo a riflettere su tre meccanismi: Accessibilità, iniezione di eventi e gestione degli appunti, ma le differenze nell'implementazione delle caselle di testo tra le diverse applicazioni sono enormi. In questo processo, ho sempre sognato che sarebbe stato fantastico poter usare direttamente Siri, per avere un controllo a livello di sistema, con continuità contestuale, percezione dello schermo e capacità di esecuzione tra le applicazioni. Tuttavia, la buona notizia è che recentemente, con l'uscita di openclaw, questo agente locale ha reso lo sviluppo di questa esigenza molto più semplice, inclusa la composizione dei prompt, l'invocazione di modelli o strumenti, ecc. Guardando le notizie di acquisizione di oggi, posso anche prevedere che Apple finalmente si sta preparando a investire nel controllo vocale.