Warp Factories: Automatische Skill-Optimierung durch Feedback-Loops

X-PostZach LloydAnkündigung

Zach Lloyd berichtet über zehn erfolgreich gemergte Pull Requests zur Skill-Verbesserung, die von Warps interner Software Factory vollautomatisch erstellt wurden. Grundlage dafür ist eine neue Self-Improvement-Funktion in Warp Factories, die ineffiziente Agentenläufe erkennt und daraus automatisch Anpassungen an Prompts und Tool-Definitionen ableitet.

Das Wichtigste

  1. Warp Factories automatisiert Entwicklungszyklen durch spezialisierte Coding-Agenten (Triage, Spec, Implementierung, Code Review).
  2. Eine integrierte Bewertungsfunktion ('Scorers') analysiert ausgewählte Agentenläufe (z. B. eine Stichprobe von 25 %) auf Codequalität, Effizienz und Richtlinieneinhaltung.
  3. Fehlgeschlagene Läufe werden aggregiert und von einem Self-Improvement-Agenten analysiert, der die Ursachen ermittelt und Korrekturen vorschlägt.
  4. Die Optimierungen werden automatisch als Pull Request oder Review-Branch zur Freigabe vorgelegt.
  5. In einem Praxisfall stoppte das System einen Agenten, der 275 Tool-Aufrufe für Screenshots zur Vergrößerung verbrauchte, indem die Skill-Konfiguration auf Browser-DevTools umgestellt wurde.

Warum das relevant ist

Unkontrollierte Endlosschleifen und ineffiziente Tool-Nutzung führen bei Coding-Agenten schnell zu explodierenden Token-Kosten. Anstatt agentenspezifische Fehler mühsam manuell in Prompts nachzupflegen, schließt ein automatisierter Bewertungs- und PR-Zyklus die Feedbackschleife direkt im Repository.

Einordnung

Das System adressiert ein zentrales Problem beim Produktiveinsatz autonomer Agenten: das schleichende Entstehen ineffizienter Verhaltensmuster. Durch konfigurierbare Bewertungsmetriken und automatisierte Pull Requests wird die Anpassung von Agenten-Skills wie regulärer Code behandelt. Menschliche Entwickler behalten die Kontrolle durch den Review-Prozess, sparen sich aber die detaillierte Fehlersuche in langen Ausführungsprotokollen.

Original-Post

Zach Lloyd

@zachlloydtweets · 1. September 2026

We're now at 10 skill improvement PRs merged, automatically made by our factory. Ex: This system caught an agent using 275 tool calls in a single run to screenshot its work during computer use. It patched the skill to prefer browser DevTools for zooming; No runaway costs since t.co/DdBPEHTtDP

172 Likes10 Antworten298 Lesezeichen24.286 Aufrufe

Auf X ansehen
Ausgewählte Antworten (5)
  • @OMID_0909 @zachlloydtweets Automatically learning from agent runs is powerful. EKOS adds an evidence-backed knowledge layer to make that operational context reusable across future runs. 🤝🫂 t.co/UX2XsqcGOe
  • @FlorinIluta @zachlloydtweets 275 tool calls just to screenshot its work is wild :)) Having the system catch that and turn it into a skill fix is pretty damn cool.
  • @AIQuanting @zachlloydtweets the 275 calls one is easy, it screams in the bill. more curious about the foreman one, disclosing unresolved tracker failures. what surfaced that? theres no cost spike when an agent just quietly doesnt mention something
  • @mktpavlenko @zachlloydtweets 275 tool calls for screenshots is how a tiny inspection habit turns into a bill nobody notices until the factory scales.
  • @OMID_0909 @zachlloydtweets t.co/UxnEsQ09wR

Erwähnte Links

Links und Tools aus diesem Beitrag

Zusammenfassung von KI erstellt (Gemini 3.8 Flash, 27. September 2026). Sie kann Fehler enthalten – maßgeblich ist die Originalquelle.

Ähnliche Einträge

Inhaltlich ähnlich, ermittelt über die KI-Suche.

  • Video

    Video:CURT

    Wie Software-Fabriken sich selbst verbessern: Drei Ansätze von Warp

    Suraj Gupta von Warp erklärt drei Mechanismen, mit denen KI-gestützte Software-Fabriken kontinuierlich optimiert werden: selbstanpassende Skills mit Git-Reviews, persistenter Faktenspeicher über Harnesses hinweg und dynamisches Model-Routing.

    KI & AI· Vortrag

  • X-Post:Ben Holmes

    Software Factories aufbauen: Der Stufenplan von Zach Lloyd

    Ben Holmes empfiehlt einen Leitfaden von Zach Lloyd, der die schrittweise Einführung einer agentenbasierten Software Factory beschreibt. Das Modell führt Teams strukturiert von einfachen Punkt-Automatisierungen hin zu voll integrierten Cloud-Entwicklungsschleifen.

    1324Lesezeichen124.223Aufrufe

    KI & AI· Sammlung

  • X-Post:Zach Lloyd

    Kulturwandel durch Software Factories: Vom lokalen Agenten zum zentralen Team-Setup

    Zach Lloyd beschreibt den organisatorischen Wandel durch sogenannte Software Factories. Der wesentliche Schritt bestand darin, von isolierten Agenten auf einzelnen Entwicklerrechnern zu einer gemeinsam gepflegten, zentralen Agenten-Infrastruktur überzugehen.

    266Lesezeichen7344Aufrufe

    KI & AI· Meinung

  • Link:Abacus.AI

    Abacus.AI AutoBots: Selbstoptimierende KI-Agenten für Workflows

    Abacus.AI hat mit AutoBots eine Plattform für autonome, rekursiv selbstoptimierende KI-Agenten vorgestellt. Die Agenten führen Aufgaben ohne menschliches Eingreifen aus, lernen aus jedem Durchlauf und lassen sich über Text-Prompts konfigurieren.

    KI & AI· Tool

  • Video

    Video:CURT

    Harness Engineering: Der Weg zur Software Factory mit KI-Agenten

    In seinem Vortrag auf der AI Engineer World's Fair erläutert Dru Knox von Tessl das Konzept der Software Factory. In diesem Modell schreiben autonome Coding-Agenten den gesamten produktiven Code, während Software-Entwickler die eigentliche Fabrik konzipieren und warten. Den Weg dorthin beschreibt Knox über das sogenannte Harness Engineering (auch Loop Engineering genannt), das Entwicklungsprozesse in drei Schleifen unterteilt und gezielt auf Autonomie, Automation und Qualitätssteigerung ausgerichtet ist.

    KI & AI· Vortrag

Zurück zur Wissensbasis

Sprechen wir über Ihr Projekt.

Kontakt

Standorte

  • Mattersburg
    Johann Nepomuk Bergerstraße 7/2/14
    7210 Mattersburg, Austria
  • Wien
    Ungargasse 64-66/3/404
    1030 Wien, Austria

Ein Teil von diesem Inhalt wurde mit KI gemacht.