LibreAI / Agents IA / AgentBench
// agents · THUDM/AgentBench

AgentBench

AgentBench est un projet de agents IA open source, créé par THUDM (THUDM/AgentBench sur GitHub). Il compte 3 765 étoiles sur GitHub et 288 forks, il est publié sous la licence Apache-2.0 et a été mis à jour pour la dernière fois sur GitHub le 8 février 2026.

A rigorous benchmark for LLMs acting as agents.

★ 3,8 k étoiles⑂ 288 forksApache-2.0mis à jour févr. 2026
▦ visuel — le README de ce projet ne contient aucune capture intégrable,
voici donc un emplacement réservé. Le guide ci-dessous est complet malgré tout.
// détails du projet

Détails du projet

Étoiles GitHub
3 765
Forks
288
Licence
Apache-2.0
Dernière mise à jour sur GitHub
8 février 2026
Catégorie
Agents IA
Type de fiche
Guide d'installation complet
// fonctionnement

Comment ça marche

  1. Start with a use case

    Pick one concrete task so you can judge whether the project fits.

  2. Fetch the source

    Clone the repo and check the prerequisites listed in the README.

  3. Set up the environment

    Install what it needs and configure credentials or model access.

  4. Try the sample workflow

    Run a minimal example end to end before wiring it into your stack.

// fonctionnalités

Pourquoi on l'adore

Agentic evaluation

Tests models as actors in environments.

ICLR 2024

Peer-reviewed benchmark design.

Multi-environment

Diverse tasks beyond static QA.

THUDM research

From a leading academic lab.

Python harness

Runnable evaluation code.

Apache-2.0

Permissive licensing.

Advertisement
// lancez-le

Lancez-le vous-même

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/THUDM/AgentBench.git
    cd AgentBench
  2. Step 2 — Install

    Set up a virtual environment and install dependencies.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 — Run tasks

    Evaluate a model on a task subset per the docs.

    # see README for the task runners
// cas d'usage

Ce que vous pouvez créer

Advertisement
// faq

Questions fréquentes

Who maintains AgentBench?

It is maintained by THUDM at THUDM/AgentBench, with 288 forks.

Is AgentBench free to use?

Yes. It is released under the Apache-2.0 license, which permits commercial use, modification, and redistribution. Read the LICENSE file for the exact terms.

Do I need a paid API to use it?

You need model access to evaluate; the harness itself is free.

How does it compare to SWE-bench?

AgentBench covers diverse agentic environments; SWE-bench targets real-world software engineering specifically.

How do I get started?

Follow the repo docs to run a task subset against your model.

// continuez l'exploration

Outils similaires

Agents IA

WorkArena

WorkArena: ServiceNow's benchmark for how well web agents handle everyday knowledge-work tasks.

★ 275 étoilesNOASSERTION
Voir le guide →
Agents IA

sglang

High-performance serving for the LLMs that power your agents.

★ 36,9 k étoilesApache-2.0
Voir le guide →
Agents IA

OSWorld

OSWorld — benchmark multimodal agents on open-ended tasks in real computer environments.

★ 3,2 k étoilesApache-2.0
Voir le guide →
Agents IA

deepteam

Open-source red-teaming framework that stress-tests LLMs and AI agents.

★ 3,0 k étoilesApache-2.0
Voir le guide →
Agents IA

AI-fundamentals

Chinese-language course on AI basics: GPU architecture, CUDA, LLMs, and agents.

★ 2,9 k étoilesApache-2.0
Voir le guide →
Agents IA

ADR

Uber's ADR: discover, observe, benchmark, and detect threats across enterprise AI agents, deployed at Uber.

★ 1,9 k étoilesApache-2.0
Voir le guide →
// alternatives

Alternatives en Agents IA

Les autres projets de la catégorie Agents IA avec le plus d'étoiles du catalogue LibreAI — la sélection réaliste d'alternatives si AgentBench ne vous convient pas.

// plus en agents

Plus en Agents IA

Projets de la catégorie Agents IA proches dans le catalogue, les plus proches en étoiles de AgentBench — continuez à explorer de part et d'autre.

Obtenir AgentBench

Gratuit et ouvert : récupérez le code source, mettez une étoile au dépôt et commencez à créer.