artificial-analysis-compare: LLM-Vergleich via Artificial Analysis API

Repositoryalexfazio/artificial-analysis-compareTool

Ein Python-basiertes Skill-Tool, das die API von Artificial Analysis abfragt, um Sprachmodelle wie GPT-5, Claude und Gemini hinsichtlich Leistung, Benchmark-Werten, Kosten und Latenz zu vergleichen.

Das Wichtigste

  1. Vergleicht LLMs nach Kriterien wie Intelligenz, Programmierfähigkeiten, Mathematik, Kosten und Geschwindigkeit.
  2. Nutzt Daten und Benchmarks direkt von der Plattform artificialanalysis.ai zur Nachvollziehbarkeit.
  3. Bietet verschiedene Ausgabeformate wie Tabellen, detaillierte Berichte oder Rankings.
  4. Erfordert einen kostenlosen API-Schlüssel von artificialanalysis.ai, der lokal in .config/config.json gespeichert wird.

Warum das relevant ist

Entwickler und Teams müssen bei der Modellauswahl Kompromisse zwischen Qualität, Kosten und Geschwindigkeit abwägen. Das Tool bindet Benchmark- und Preisdaten direkt in Entwicklungsumgebungen oder Agenten-Workflows ein.

Einordnung

Das Repository stellt eine Erweiterung bzw. einen Skill dar, um LLM-Vergleichsdaten programmatisch abzurufen. Technologisch basiert das Projekt auf Python und greift auf die REST-API von Artificial Analysis zu. Mit 12 Stars, keinen Forks und ohne angegebene Lizenz befindet sich das Projekt in einem sehr frühen experimentellen Stadium. Es richtet sich primär an Entwickler und KI-Praktiker, die Modellentscheidungen automatisieren oder schnell innerhalb von CLI- bzw. Agenten-Umgebungen nachschlagen wollen.

Gefunden in

Zusammenfassung von KI erstellt (Gemini 3.8 Flash, 27. September 2026). Sie kann Fehler enthalten – maßgeblich ist die Originalquelle.

Inhaltlich ähnlich, ermittelt über die KI-Suche.

  • Link:artificialanalysis.ai

    Artificial Analysis: Unabhängige Benchmarks für KI-Modelle und API-Anbieter

    Artificial Analysis bietet unabhängige Leistungs- und Kostenvergleiche für Sprachmodelle, Coding-Agenten und multimodale APIs. Mit dem Update auf den Intelligence Index v4.2 wurden die Testmethoden und Gewichtungen für aktuelle Frontier-Modelle angepasst.

    KI & AI· Tool

  • Link:Artificial Analysis

    Artificial Analysis Intelligence Index v4.2

    Artificial Analysis fasst in Version 4.2 seines Intelligence Index zehn Benchmarks aus den Bereichen Mathematik, Wissenschaft, Coding und Reasoning zusammen. Claude Fable 5.1 führt das Ranking mit 57 Punkten an, gefolgt von GPT-6 Astra mit 55 Punkten.

    KI & AI· Sammlung

  • Link:Shishir G. Patil, Huanzhi Mao, Charlie Cheng-Jie Ji, Fanjia Yan, Vishnu Suresh, Ion Stoica, Joseph E. Gonzalez

    Berkeley Function Calling Leaderboard (BFCL) V4

    Das Berkeley Function Calling Leaderboard (BFCL) V4 evaluiert die Fähigkeit von Sprachmodellen, Funktionen und Werkzeuge präzise aufzurufen. Version 4 erweitert frôhere Iterationen um eine ganzheitliche agentische Bewertung.

    KI & AI· Tool

  • Repository:anthropics/skills

    Anthropic Skills: Referenz-Repository und Spezifikation für Claude Agent Skills

    Anthropic stellt in einem öffentlichen Repository Beispiel-Skills, Templates und die Spezifikation des Agent-Skills-Standards für Claude bereit. Skills bündeln Anweisungen, Skripte und Ressourcen in Verzeichnissen mit einer zentralen SKILL.md-Datei, um Claude wiederholbare Aufgaben wie Dokumentenerstellung, Code-Tests oder Workflows beizubringen.

    174.341SternePython

    KI & AI· Sammlung

  • Repository:mohitagw15856/pm-claude-skills

    PM Skills: Framework-Sammlung für KI-Agenten und Assistenten

    PM Skills ist eine MIT-lizensierte Sammlung von über 1.100 strukturierten Agent Skills im Markdown-Format. Sie liefert standardisierte Arbeitsabläufe für berufliche Aufgaben und persönliche Ausnahmesituationen auf Plattformen wie Claude, ChatGPT, Gemini, Cursor und Codex.

    1336SterneHTML

    KI & AI· Sammlung

Lassen Sie uns über Ihr Projekt sprechen

Standorte

  • Mattersburg
    Johann Nepomuk Bergerstraße 7/2/14
    7210 Mattersburg, Austria
  • Wien
    Ungargasse 64-66/3/404
    1030 Wien, Austria

Dieser Inhalt wurde teilweise mithilfe von KI erstellt.