typesafe-computer-use
Controle um Mac usando objetivos em inglês simples por meio de OCR e um classificador TypeSafe.
Controle seu Mac com objetivos em inglês simples por cerca de um quinquagésimo de centavo por passo.
typesafe-computer-use (jev) é uma ferramenta open source que lê a tela do seu Mac, classifica a próxima ação usando TypeSafe e executa cliques por uma fração de centavo por passo. É ideal para desenvolvedores e usuários avançados que buscam automação de desktop programática e acessível, sem custos elevados de modelos de fronteira.
O que é
Combina Vision OCR, árvores de acessibilidade e um pequeno modelo de decisão TypeSafe para escolher ações a partir de uma lista curta, em vez de planejar cada passo com um modelo de visão caro. O código lida com fatos determinísticos, como análise de datas e estados de foco, enquanto um modelo de escrita é chamado apenas para texto livre ou respostas finais.
Para quem
É adequado para desenvolvedores e entusiastas que desejam experimentar a automação de desktop no macOS sem pagar altas taxas de API de modelos de fronteira. Não é adequado para usuários que buscam um aplicativo de consumo totalmente polido e sem necessidade de configuração, pois requer permissões de terminal, chaves de API e testes a seco cuidadosos.
Recursos principais
Loop de Classificação TypeSafe
Usa um classificador pequeno para fazer escolhas rápidas e baratas entre opções de ação, em vez de um planejamento de fronteira caro.
Estado de Tela Determinístico
Combina Vision OCR e árvores de acessibilidade com fatos computados por código, como datas e URLs, para informar decisões.
Reprodução de Execuções Offline
Grava cada pasta de execução para que você possa inspecionar tempos, payloads e reproduzir sessões travadas offline.
Múltiplos Backends de Navegador
Suporta capturas de tela por OCR e percepção direta de DOM via Chrome DevTools.
Pronto em 3 passos
Nosso veredito honesto
Pontos fortes
- Significativamente mais barato por decisão do que modelos de visão de fronteira puros
- Baixa latência do modelo e tempos de passo de ponta a ponta
- Mantém pastas de execução locais para depuração offline e reprodução
- Suporta avaliação de benchmark OSWorld nativamente
Onde deixa a desejar
- Requer permissões ativas de Gravação de Tela e Acessibilidade no macOS para funcionar
- Depende de chaves de API externas pagas para recursos do TypeSafe e Anthropic opcionais
- Em desenvolvimento beta intenso com comportamento em mudança e suporte experimental ao Windows
Preços & licença
Gratuito sob sua licença open source, mas requer chaves de API pagas para o TypeSafe e uso opcional da Anthropic para conduzir as decisões.
Vagas para quem fala português
880 vagas remotas abertas de treinamento de IA, atualizadas em 15 de novembro de 2026; a maioria paga $20–$175 por hora. 8 delas pedem falantes de português. O Zekai lista de graça; a candidatura vai para a plataforma do empregador.
Alternativas
Estas ferramentas de IA avaliadas fazem o mesmo trabalho na hora — do nosso diretório avaliado.
Use, ou deixe que a gente configure
FAQ
Quanto custa para executar?
Custa cerca de $0.0002 por passo usando o classificador TypeSafe, mais custos opcionais da API Anthropic se você usar o modelo de escrita.
Quais sistemas operacionais são suportados?
macOS 14 ou mais recente é totalmente suportado, enquanto Windows 10 e 11 são experimentais.
Como faço para parar um loop de automação fora de controle?
Pressione Ctrl-C no terminal ou jogue o mouse no canto superior esquerdo da tela.
