typesafe-computer-use: automatizzare il Mac con Jev

L'agente trasforma i controlli visibili in uno spazio di azioni indicizzato per seguire un obiettivo in linguaggio naturale. Jev sceglie operazione ed elemento compatibile in una richiesta; un LLM separato genera testo solo per TYPE_TEXT.

Jev Browser Use gestisce navigazione, clic, interruttori e scorrimento; Codex inserisce testo e verifica il risultato. Jev sceglie azioni dal testo di accessibilità; la connessione Computer Use esistente le esegue. Servono Node.js 22+, Codex collegato al browser e credenziali corrispondenti TypeSafe o OpenRouter.

TipTour è un assistente macOS con compiti testuali Jev e una modalità vocale Gemini separata. Jev sceglie controlli rilevati localmente; TipTour esegue e verifica i clic, mantenendo gli screenshot sul dispositivo. Scegli modalità, chiave API e permessi; la compilazione richiede macOS 14.2+ e Xcode.

Surf espone navigazione Chrome, lettura, clic e screenshot come comandi CLI per agenti e script. I comandi semantici facoltativi usano Jev per trovare controlli, ordinare regioni, verificare risultati e scegliere azioni circoscritte. Usa comandi deterministici per percorsi noti; semantic.act esplora obiettivi controllando confidenza, attualità degli elementi e budget.

jev-voice-browser invia trascrizioni a Node per controllare una finestra Chromium visibile tramite Playwright. Jev sceglie intento e bersaglio; il codice estrae testo letterale e decide se agire, aspettare o chiedere. Servono Node 20+, chiave TypeSafe e Chrome o Edge per la pagina del microfono.

Unclutter nasconde elementi superflui in Chrome, Chromium e Firefox con regole salvate per modello di pagina. Jev classifica candidati; l’estensione valida risposte e controlla selettori e nascondimento reversibile. Scegli credenziali TypeSafe o Vercel; l’analisi è manuale di default e le regole salvate funzionano offline.