Linknekuda-aiSammlung
Für Entwickler von Browser-Agents zeigt der Benchmark, dass strukturierte APIs und direkte Schnittstellen wie WebMCP hinsichtlich Latenz, Token-Verbrauch und Kosten herkömmlichen visuellen Interaktionsansätzen (Computer Use) sowie reinem DOM-Scraping deutlich überlegen sind.
Die Daten belegen drastische Einsparungen beim Token-Verbrauch: Während GPT-5.6 Luna via WebMCP im Median nur 2.596 Token benötigt, steigen die Werte bei Computer Use auf 20.914 Token und bei DOM plus Vision auf 29.561 Token. Noch extremer fällt der Unterschied bei Sonnet 5 aus, wo DOM und Vision bis zu 64.424 Token pro Aufgabe konsumieren. Strukturierte Schnittstellen bieten Web-Agents somit einen entscheidenden Effizienzvorteil gegenüber pixel- oder markupbasierten Notlösungen.
Zusammenfassung von KI erstellt (Gemini 3.8 Flash, 27. September 2026). Sie kann Fehler enthalten – maßgeblich ist die Originalquelle.
Inhaltlich ähnlich, ermittelt über die KI-Suche.
Repository:nekuda-ai/WindTunnel
WindTunnel ist ein Open-Source-Benchmark-Harness, das unterschiedliche Interaktionsmethoden von Browser-Agenten auf Webseiten vergleicht. Untersucht werden WebMCP (direkt von Websites bereitgestellte Aktionen), Screenshots (Computer Use via Koordinaten) und klassische Seitenstrukturen (DOM und Accessibility Tree).
34SterneHTML
X-Post:Idan Levin
Idan Levin hat mit WindTunnel einen Open-Source-Benchmark für WebMCP vorgestellt. Die Auswertung vergleicht Website-gestützte Tool-Aufrufe mit Computer-Use- und DOM-basierten Methoden über 49 Aufgaben auf acht realen Webseiten.
581Lesezeichen138.283Aufrufe
Link:Rogerio Bonatti, Dan Zhao, Francesco Bonacci, et al.
Forschende von Microsoft, der Carnegie Mellon University und der Columbia University haben mit Windows Agent Arena (WAA) ein Open-Source-Framework veröffentlicht, mit dem multimodale KI-Agenten in einer nativen Windows-11-Umgebung getestet werden können. Das System umfasst über 150 Alltagsaufgaben und lässt sich via Azure parallelisieren, wodurch vollständige Benchmark-Läufe in rund 20 Minuten statt mehreren Tagen durchlaufen. Ein begleitend vorgestellter Referenz-Agent namens Navi erreichte eine Erfolgsquote von 19,5 Prozent, verglichen mit 74,5 Prozent menschlicher Genauigkeit.
Link:webmcp.com
Der WebMCP Ecosystem Adoption Tracker dokumentiert den Implementierungsstand des WebMCP-Standards in Browsern und KI-Agenten. Während OpenAI WebMCP in ChatGPT bereits standardmäßig aktiviert hat und Chrome eine Veröffentlichung mit Version 157 anpeilt, zeigen sich Mozilla neutral und WebKit ablehnend.
Artikel:Jiarui Lu, Thomas Holleis, Yizhe Zhang, Bernhard Aumayer, Feng Nan, Felix Bai, Shuang Ma, Shen Ma, Mengyu Li, Guoli Yin, Zirui Wang, Ruoming Pang
ToolSandbox ist ein Evaluierungs-Benchmark, der die Fähigkeiten von Sprachmodellen bei der Werkzeugnutzung anhand zustandsbehafteter Umgebungen und mehrteiliger Dialoge testet.
Repository:ChromeDevTools/chrome-devtools-mcp
chrome-devtools-mcp verbindet KI-Assistenten und Coding-Agents über das Model Context Protocol (MCP) mit Google Chrome. Das Werkzeug erlaubt Agents, den Browser per Puppeteer zu steuern, Netzwerk- und Konsolen-Logs inklusive Source Maps zu inspizieren und Performance-Traces auszuwerten.
50.830SterneTypeScript
Dieser Inhalt wurde teilweise mithilfe von KI erstellt.
