Harness-Adapter: RL-Training für agentische Aufgaben auf LFM2.5, LFM3 und Twil-9B

X-PostMario ZechnerAnkündigung

Younes kündigt den Live-Start für das Training von LoRA-Adaptern auf Basis von LFM2.5, LFM3 und Twil-9B an. Mittels Reinforcement Learning sollen die Modelle für agentische Aufgaben präziser und effizienter werden. Mario Zechner empfiehlt das öffentlich einsehbare Vorhaben.

Das Wichtigste

  1. LoRA-Adapter werden auf LFM2.5 und LFM3 von Liquid AI sowie Twil-9B von thewebAI trainiert.
  2. Ziel des Reinforcement-Learning-Trainings ist eine höhere Effizienz und Genauigkeit bei agentischen Aufgaben.
  3. Der Trainingsfortschritt wird live über einen Hugging-Face-Space gestreamt und in einem Hugging-Face-Blogpost begleitet.

Warum das relevant ist

Spezialisierte LoRA-Adapter ermöglichen es Entwicklern, schlankere Basismodelle für Agent-Workflows zu optimieren, ohne teure Vollmodelle trainieren zu müssen.

Einordnung

Live-Training für KI-Agenten

Mario Zechner verweist auf ein neues Experiment von Younes (@yb2698), bei dem LoRA-Adapter (Low-Rank Adaptation) via Reinforcement Learning (RL) trainiert werden. Als Basissysteme dienen die Modelle LFM2.5 und LFM3 von Liquid AI sowie das Modell Twil-9B von thewebAI.

Fokus auf Agentic Tasks

Ziel der Initiative ist es, die Modelle speziell auf agentische Arbeitsabläufe auszurichten. Durch den Einsatz von Reinforcement Learning sollen Genauigkeit und Effizienz der Modelle in Agenten-Setups gesteigert werden. Der Fortschritt des Modelltrainings kann direkt über Hugging Face Spaces live verfolgt werden.

Original-Post

Mario Zechner

@badlogicgames · 6. November 2026

super cool! t.co/b0qPwl9nRp

91 Likes2 Antworten92 Lesezeichen9942 Aufrufe

Auf X ansehen
Ausgewählte Antworten (2)
  • @MixtTensi8198 @badlogicgames Finding that LFM3 works well in Pi, but with SFT and RL it ends up doing much better at recovering from typicaly failure modes and spooky loops! :)
  • @yb2698 @badlogicgames Thanks !

Zusammenfassung von KI erstellt (Gemini 3.8 Flash, 8. November 2026). Sie kann Fehler enthalten – maßgeblich ist die Originalquelle.

Inhaltlich ähnlich, ermittelt über die KI-Suche.

  • Artikel:Shuai Shao, Kangning Zhang, Qingyao Li, Shijian Wang, Hao Wang, Wenxiang Jiao, Yuan Lu, Yi Guo, Weiwen Liu, Weinan Zhang

    Harness-R1: Automatisierte Laufzeit-Optimierung für KI-Agenten anhand von Fehlertrajektorien

    Ein Forschungsteam stellt Harness-R1 vor, eine Methode zur gezielten Anpassung der Software-Laufzeitumgebung (Harness) von LLM-Agenten. Statt nur Modellgewichte anzupassen, lernt ein separater 9B-Agent per Reinforcement Learning, fehlerhafte Ausführungsspuren zu analysieren und validierte Code-Patches für Kontextaufbereitung, Tool-Vermittlung und Aktionsvalidierung zu generieren.

    KI & AI· Forschung

  • Repository:DeepExperience/Harness-R1

    Harness-R1: Laufzeit-Harnesses für KI-Agenten aus Fehlerverläufen generieren

    Harness-R1 ist ein Forschungsprojekt, das einen sogenannten Harness Engineer trainiert: Ein Modell analysiert fehlgeschlagene Trajektorien von KI-Agenten und generiert automatisch wiederverwendbare Laufzeit-Hooks, um dieselben Aufgaben im zweiten Anlauf erfolgreich zu bewältigen.

    97SternePython

    KI & AI· Forschung

  • Repository:ornith-ai/Ornith-1

    Ornith: Selbstverbessernde Open-Source-Modelle für Agentenaufgaben

    Das GitHub-Repository Ornith-1 stellt eine Familie quelloffener KI-Modelle vor, die speziell auf agentische Aufgaben und iterative Selbstoptimierung ausgelegt sind. Mit den Generationen Ornith-1.0 und Ornith-1.5 verfolgt das Projekt Ansätze wie Self-Scaffolding und automatisierte Aufgaben- und Lösungserstellung für Reinforcement Learning.

    2013Sterne

    KI & AI· Tool

  • Repository:amosblomqvist/learnharness

    LearnHarness: Open-Source-Agenten-Harness für adaptives Lernen

    LearnHarness nutzt KI-Agenten, um komplexe Themen schrittweise anhand des individuellen Wissensstands zu vermitteln. Das Tool erfasst Denkwege und sichert Erkenntnisse in einem Wissensgraphen. Es richtet sich an Lernende und Entwickler, die anspruchsvolle Konzepte strukturiert erschließen wollen.

    3186SterneTypeScript

    KI & AI· Tool

Sprechen wir über Ihr Projekt.

Standorte

  • Mattersburg
    Johann Nepomuk Bergerstraße 7/2/14
    7210 Mattersburg, Austria
  • Wien
    Ungargasse 64-66/3/404
    1030 Wien, Austria

Ein Teil von diesem Inhalt wurde mit KI gemacht.