LibreAI / KI-Agenten / AgentBench
// agents · THUDM/AgentBench

AgentBench

AgentBench ist ein Open-Source-Projekt aus der Kategorie KI-Agenten von THUDM (THUDM/AgentBench auf GitHub). Es hat 3.765 Sterne auf GitHub und 288 Forks, wird unter der Lizenz Apache-2.0 veröffentlicht und wurde zuletzt am 8. Februar 2026 auf GitHub aktualisiert.

A rigorous benchmark for LLMs acting as agents.

★ 3,8 Tsd. Sterne⑂ 288 ForksApache-2.0aktualisiert Feb 2026
▦ Visual — das README dieses Projekts enthält keinen einbettbaren Screenshot,
darum hier ein Platzhalter. Die Anleitung unten ist trotzdem vollständig.
// projektdaten

Projektdaten

GitHub-Sterne
3.765
Forks
288
Lizenz
Apache-2.0
Zuletzt auf GitHub aktualisiert
8. Februar 2026
Kategorie
KI-Agenten
Eintragstyp
Vollständige Installationsanleitung
// so funktioniert es

So funktioniert es

  1. Start with a use case

    Pick one concrete task so you can judge whether the project fits.

  2. Fetch the source

    Clone the repo and check the prerequisites listed in the README.

  3. Set up the environment

    Install what it needs and configure credentials or model access.

  4. Try the sample workflow

    Run a minimal example end to end before wiring it into your stack.

// funktionen

Warum es so beliebt ist

Agentic evaluation

Tests models as actors in environments.

ICLR 2024

Peer-reviewed benchmark design.

Multi-environment

Diverse tasks beyond static QA.

THUDM research

From a leading academic lab.

Python harness

Runnable evaluation code.

Apache-2.0

Permissive licensing.

Advertisement
// selbst ausführen

Führe es selbst aus

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/THUDM/AgentBench.git
    cd AgentBench
  2. Step 2 — Install

    Set up a virtual environment and install dependencies.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 — Run tasks

    Evaluate a model on a task subset per the docs.

    # see README for the task runners
// anwendungsfälle

Was du damit bauen kannst

Advertisement
// häufige fragen

Häufige Fragen

Who maintains AgentBench?

It is maintained by THUDM at THUDM/AgentBench, with 288 forks.

Is AgentBench free to use?

Yes. It is released under the Apache-2.0 license, which permits commercial use, modification, and redistribution. Read the LICENSE file for the exact terms.

Do I need a paid API to use it?

You need model access to evaluate; the harness itself is free.

How does it compare to SWE-bench?

AgentBench covers diverse agentic environments; SWE-bench targets real-world software engineering specifically.

How do I get started?

Follow the repo docs to run a task subset against your model.

// weiter entdecken

Ähnliche Tools

KI-Agenten

WorkArena

WorkArena: ServiceNow's benchmark for how well web agents handle everyday knowledge-work tasks.

★ 275 SterneNOASSERTION
Anleitung ansehen →
KI-Agenten

sglang

High-performance serving for the LLMs that power your agents.

★ 36,9 Tsd. SterneApache-2.0
Anleitung ansehen →
KI-Agenten

OSWorld

OSWorld — benchmark multimodal agents on open-ended tasks in real computer environments.

★ 3,2 Tsd. SterneApache-2.0
Anleitung ansehen →
KI-Agenten

deepteam

Open-source red-teaming framework that stress-tests LLMs and AI agents.

★ 3,0 Tsd. SterneApache-2.0
Anleitung ansehen →
KI-Agenten

AI-fundamentals

Chinese-language course on AI basics: GPU architecture, CUDA, LLMs, and agents.

★ 2,9 Tsd. SterneApache-2.0
Anleitung ansehen →
KI-Agenten

ADR

Uber's ADR: discover, observe, benchmark, and detect threats across enterprise AI agents, deployed at Uber.

★ 1,9 Tsd. SterneApache-2.0
Anleitung ansehen →
// alternativen

Alternativen im Bereich KI-Agenten

Die anderen Projekte der Kategorie KI-Agenten mit den meisten Sternen im LibreAI-Katalog — die realistische Auswahl, falls AgentBench nicht das Richtige ist.

// mehr in agents

Mehr in KI-Agenten

Verwandte Projekte der Kategorie KI-Agenten im Katalog, die AgentBench bei den Sternen am nächsten stehen — zum Weiterstöbern auf beiden Seiten.

Hol dir AgentBench

Kostenlos und offen — hol dir den Quellcode, gib dem Repository einen Stern und leg los.