typesafe-computer-use
Steuern Sie einen Mac über einfache englische Ziele mittels OCR und einem TypeSafe-Klassifizierer.
Steuern Sie Ihren Mac mit einfachen englischen Zielen für etwa einen Fünfzigstel Cent pro Schritt.
typesafe-computer-use (jev) ist ein Open-Source-Tool, das Ihren Mac-Bildschirm liest, die nächste Aktion über TypeSafe klassifiziert und Klicks für einen Bruchteil eines Cents pro Schritt ausführt. Es eignet sich für Entwickler und Power-User, die eine erschwingliche, programmatische Desktop-Automatisierung ohne hohe Kosten für Frontier-Modelle wünschen.
Was es ist
Es kombiniert Vision OCR, Barrierefreiheitsbäume und ein kleines TypeSafe-Entscheidungsmodell, anstatt jeden Schritt mit einem teuren Vision-Modell zu planen. Code verarbeitet deterministische Fakten wie Datumsparfen und Fokus-Zustände, während ein Schreibmodell nur für Freitext oder finale Antworten aufgerufen wird.
Für wen
Es eignet sich für Entwickler und Bastler, die mit Desktop-Automatisierung auf macOS experimentieren möchten, ohne hohe API-Gebühren für Frontier-Modelle zu zahlen. Es ist nicht für Benutzer geeignet, die eine vollkommen ausgereifte Verbraucheranwendung ohne Einrichtung suchen, da es Terminal-Berechtigungen, API-Schlüssel und sorgfältige Probelläufe erfordert.
Wichtige Funktionen
TypeSafe-Klassifizierungsschleife
Verwendet einen kleinen Klassifizierer, um schnelle, günstige Entscheidungen über Aktionsoptionen zu treffen, anstatt teure Frontier-Planung.
Deterministischer Bildschirmzustand
Kombiniert Vision OCR und Barrierefreiheitsbäume mit code-berechneten Fakten wie Daten und URLs als Entscheidungsgrundlage.
Offline-Wiedergabe von Läufen
Schreibt jeden Laufordner heraus, sodass Sie Timings, Payloads untersuchen und hängende Sitzungen offline wiederholen können.
Mehrere Browser-Backends
Unterstützt sowohl OCR-Bildschirmaufnahmen als auch direkte DOM-Wahrnehmung über Chrome DevTools.
Startklar in 3 Schritten
Unser ehrliches Fazit
Stärken
- Deutlich günstiger pro Entscheidung als rohe Frontier-Vision-Modelle
- Schnelle Modell-Latenz und End-to-End-Schrittzeiten
- Behält lokale Laufordner für Offline-Debugging und Wiedergabe bei
- Unterstützt die OSWorld-Benchmark-Auswertung von Haus aus
Schwächen
- Erfordert aktive macOS-Bildschirmaufnahme- und Bedienungshilfen-Berechtigungen
- Hängt von kostenpflichtigen externen API-Schlüsseln für TypeSafe und optionalen Anthropic-Funktionen ab
- In starker Beta-Entwicklung mit sich änderndem Verhalten und experimenteller Windows-Unterstützung
Preise & Lizenz
Kostenlos unter seiner Open-Source-Lizenz, erfordert jedoch kostenpflichtige API-Schlüssel für TypeSafe und optional die Anthropic-Nutzung, um die Entscheidungen zu steuern.
Stellen für Deutschsprachige
879 offene Remote-Stellen im KI-Training, aktualisiert am 15. November 2026; die meisten zahlen $20–$175 pro Stunde. 12 davon suchen Deutschsprachige. Zekai listet sie kostenlos; die Bewerbung läuft über die Plattform des Arbeitgebers.
Alternativen
Diese bewerteten KI-Tools erledigen die Aufgabe sofort — aus unserem bewerteten Verzeichnis.
Nutze es, oder lass es uns einrichten
FAQ
Wie viel kostet die Ausführung?
Es kostet etwa $0.0002 pro Schritt bei Verwendung des TypeSafe-Klassifizierers sowie optionale Anthropic-API-Kosten, wenn Sie das Schreibmodell verwenden.
Welche Betriebssysteme werden unterstützt?
macOS 14 oder neuer wird vollständig unterstützt, während Windows 10 und 11 experimentell sind.
Wie stoppe ich eine durchgehende Automatisierungsschleife?
Drücken Sie Strg-C im Terminal oder bewegen Sie Ihre Maus ruckartig in die obere linke Ecke des Bildschirms.
