Was ist ein Agent Harness? Tejas Kumar erklärt Harness Engineering

X-PostTejas KumarSammlung

Tejas Kumar hat seinen Vortrag von der AI Engineer Conference als Blogbeitrag veröffentlicht. Er erläutert das Konzept des Agent Harness: die Code-Schicht um ein KI-Modell herum, die Verlässlichkeit erzwingt. Statt fehlschlagende Agenten über veränderte Prompts zu reparieren, plädiert er für Harness Engineering.

Das Wichtigste

  1. Ein Agent Harness umfasst alles um das Modell herum: Tool Registry, Modellaufruf, Kontextmanagement, Guardrails, Agent-Loop und Verifikationsschritt.
  2. Ein Harness ist nicht nur der Agent-Loop, sondern das gesamte System, das den Loop umschließt und kontrolliert.
  3. Harness Engineering bezeichnet das Beheben von Agentenfehlern durch Code im Harness anstatt durch wiederholtes Anpassen des System-Prompts.
  4. Rented Models (wie GPT-3.5 Turbo oder neuere Modelle) sind Blackboxes; der Harness sorgt dafür, dass sie trotz unkontrollierbarer Variablen deterministisch arbeiten.
  5. In einer Schritt-für-Schritt-Demo bringt Kumar ein schwaches Modell (GPT-3.5 Turbo) per Playwright dazu, Hacker News zu bedienen, ohne den Prompt zu verändern.

Warum das relevant ist

Viele Teams versuchen, unzuverlässige Agenten durch immer längere System-Prompts zu stabilisieren. Kumar zeigt, dass Belastbarkeit und Fehlertoleranz primär durch Software-Architektur – Validierung, Guardrails und deterministische Prüfungen – erreicht werden müssen.

Einordnung

Kumar grenzt den Begriff 'Agent Harness' (Laufzeitumgebung in der KI-Entwicklung) vom traditionellen 'Evaluation Harness' (Benchmark-Testsuite im Machine Learning) ab. Er argumentiert, dass das Modell austauschbar ist, während Geschäftslogik, Sicherheitsgrenzen und Erfolgsprüfungen fest im umgebenden Anwendungscode verankert sein sollten.

Original-Post

Tejas Kumar

@TejasKumar_ · 14. September 2026

my popular talk on ai harnesses from @aiDotEngineer is now a blog post on my blog as well for those who prefer reading. lmk if its good. t.co/hTfJqbTAB5

161 Likes4 Antworten258 Lesezeichen9691 Aufrufe

Auf X ansehen
Weitere Posts im Thread (1)
  1. @RayFernando1337 @aiDotEngineer thanks ray!
Ausgewählte Antworten (4)
  • @RayFernando1337 @TejasKumar_ @aiDotEngineer Great write up and I can hear you speaking in this. Love it!
  • @roscherveniak @TejasKumar_ @aiDotEngineer The model is becoming the interchangeable part The harness is where product behavior, failure handling, and trust actually live The practical test is whether a new model can slot in without changing the user contract
  • @CorppAI @TejasKumar_ @aiDotEngineer harness verified. tool calls gated. — corp
  • @foxriverdevops @TejasKumar_ @aiDotEngineer cool, I enjoyed the talk!

Erwähnte Links

Links und Tools aus diesem Beitrag

Zusammenfassung von KI erstellt (Gemini 3.8 Flash, 27. September 2026). Sie kann Fehler enthalten – maßgeblich ist die Originalquelle.

Ähnliche Einträge

Inhaltlich ähnlich, ermittelt über die KI-Suche.

  • Artikel:Tejas Kumar

    Was ist ein Agent Harness? Harness Engineering verständlich erklärt

    Tejas Kumar erklärt das Konzept des Agent Harness: die Laufzeitumgebung und Kontrollschicht um ein KI-Modell, die dessen Verhalten verlässlich macht. Anhand eines praktischen Beispiels zeigt er, wie deterministischer Code rund um GPT-3.5 Turbo ein unzuverlässiges Verhalten korrigiert, ohne den Prompt zu ändern.

    KI & AI· Anleitung

  • Artikel:Mehdi Allahyari

    Harness Engineering: Warum die Umgebung wichtiger ist als das LLM-Modell

    Nach Prompt- und Context-Engineering bildet Harness Engineering die dritte Phase im Bau autonomer KI-Systeme. Mehdi Allahyari beschreibt die Software-Infrastruktur um das Sprachmodell als entscheidenden Erfolgsfaktor für Zuverlässigkeit und Selbstkorrektur.

    KI & AI· Sammlung

  • X-Post:rari

    Harness Engineering: Wie robuste Umgebungen für Multi-Agenten-Systeme entstehen

    Ein Leitfaden und Video-Workshop von rari analysiert das Konzept des Harness Engineering für KI-Agenten. Wenn Agenten scheitern, liegt das meist nicht an den Gewichten des Modells oder schlechten Prompts, sondern an einer unzureichend definierten Ausführungsumgebung. Anhand des Claude Agent SDK und Beispielen von Anthropic und OpenAI wird gezeigt, wie Werkzeuge, State, Sensorik und Leitplanken strukturiert werden müssen.

    1960Lesezeichen142.239Aufrufe

    KI & AI· Sammlung

  • Artikel:Mehdi Allahyari

    Aufbau eines Agent Harness: Architektur robuster KI-Agenten

    Mehdi Allahyari analysiert die fünf Kernkomponenten eines produktionsreifen Agent Harness und zeigt anhand einer Python-Implementierung, wie Fehler abgefangen und in strukturierte Feedbackschleifen für LLMs überführt werden.

    KI & AI· Anleitung

  • X-Post:Mark Ajzenstadt

    Die Rolle des Harness bei KI-Agenten

    Mark Ajzenstadt betont, dass für das Verständnis von KI-Agenten nicht das Modell im Mittelpunkt steht, sondern das sogenannte Harness – also sämtliche Komponenten rund um das Modell.

    1708Lesezeichen140.764Aufrufe

    KI & AI· Meinung

  • Link:hanakoxbt

    Five Layers: Kurs zur Architektur und Entwicklung von KI-Agenten

    Der Online-Kurs 'Five Layers' von hanakoxbt strukturiert die Entwicklung von KI-Agenten in fünf aufeinander aufbauende Schichten: Prompt, Context, Harness, Loop und Graph Engineering. Statt auf komplexe Frameworks setzt das Material auf modulare Vorlagen, Konfigurationen und deterministische Abläufe zur Fehlervermeidung in Produktionsumgebungen.

    KI & AI· Sammlung

Zurück zur Wissensbasis

Lassen Sie uns über Ihr Projekt sprechen

Kontakt aufnehmen

Standorte

  • Mattersburg
    Johann Nepomuk Bergerstraße 7/2/14
    7210 Mattersburg, Austria
  • Wien
    Ungargasse 64-66/3/404
    1030 Wien, Austria

Dieser Inhalt wurde teilweise mithilfe von KI erstellt.