LibreAI / KI-Agenten / autoevals
// agents · braintrustdata/autoevals

autoevals

autoevals ist ein Open-Source-Projekt aus der Kategorie KI-Agenten von braintrustdata (braintrustdata/autoevals auf GitHub). Es hat 1.050 Sterne auf GitHub und 88 Forks, wird unter der Lizenz MIT veröffentlicht und wurde zuletzt am 7. Oktober 2026 auf GitHub aktualisiert.

Fast, best-practice evaluations for AI model outputs.

★ 1,1 Tsd. Sterne⑂ 88 ForksMITaktualisiert Okt 2026
▦ Visual — das README dieses Projekts enthält keinen einbettbaren Screenshot,
darum hier ein Platzhalter. Die Anleitung unten ist trotzdem vollständig.
// projektdaten

Projektdaten

GitHub-Sterne
1.050
Forks
88
Lizenz
MIT
Zuletzt auf GitHub aktualisiert
7. Oktober 2026
Kategorie
KI-Agenten
Eintragstyp
Vollständige Installationsanleitung
// so funktioniert es

So funktioniert es

  1. Define the job

    Write down the task or workflow you want the agent to handle.

  2. Get the code

    Clone the repository and read the README's prerequisites.

  3. Set up your environment

    Install dependencies and configure keys or endpoints.

  4. Try the quickstart

    Run the sample script and check the output against the docs.

// funktionen

Warum es so beliebt ist

Ready-made scorers

Common eval patterns out of the box.

Best practices

Braintrust's eval expertise packaged.

Lightweight

A library, not a platform.

LLM-as-judge

Use models to score models.

Python-native

Drops into test suites.

MIT licensed

Free for any use.

Advertisement
// selbst ausführen

Führe es selbst aus

  1. Step 1 - Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/braintrustdata/autoevals.git
    cd autoevals
  2. Step 2 - Install dependencies

    Create a virtual environment and install the requirements.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 - Run an example

    Treat these as starting points - the README documents the exact commands.

    python examples/quickstart.py
// anwendungsfälle

Was du damit bauen kannst

Advertisement
// häufige fragen

Häufige Fragen

Who is behind autoevals?

The project lives at braintrustdata/autoevals and has attracted 88 forks. Browse its commit history and contributor list for a sense of maintenance pace.

Is autoevals free to use?

Yes - it is MIT licensed, so you can use, modify, and distribute it freely, including in commercial projects.

Do I need a paid API to use it?

Running the evaluation is free; the model under test may use your own paid API keys.

AutoEvals vs Harbor?

AutoEvals is a lightweight scoring library; Harbor is a full evaluation framework. Start with AutoEvals for quick scoring, graduate to Harbor for a complete eval program.

Where should I start?

The README and the official docs site are the fastest path: run the quickstart example first, then adapt it to your use case.

// weiter entdecken

Ähnliche Tools

KI-Agenten

tada

An open-source speech language model from Hume.

★ 1,0 Tsd. SterneNOASSERTION
Anleitung ansehen →
KI-Agenten

openvla

Open-source 7B vision-language-action model and codebase for generalist robot manipulation.

★ 7,1 Tsd. SterneMIT
Anleitung ansehen →
KI-Agenten

10x

Up to 20x faster AI coding with smart model routing and full self-hosting.

★ 1,4 Tsd. SterneMIT
Anleitung ansehen →
KI-Agenten

agent-world-model

Snowflake's Agent World Model: synthesise 1,000 executable MCP tool-use environments for agentic RL.

★ 465 SterneNOASSERTION
Anleitung ansehen →
KI-Agenten

LightRAG

Simple, fast retrieval-augmented generation with graph smarts.

★ 40,0 Tsd. SterneMIT
Anleitung ansehen →
KI-Agenten

genesis-world

A Python simulation platform for robotics and embodied AI — fast physics, rendering and learning

★ 30,0 Tsd. SterneApache-2.0
Anleitung ansehen →
// alternativen

Alternativen im Bereich KI-Agenten

Die anderen Projekte der Kategorie KI-Agenten mit den meisten Sternen im LibreAI-Katalog — die realistische Auswahl, falls autoevals nicht das Richtige ist.

// mehr in agents

Mehr in KI-Agenten

Verwandte Projekte der Kategorie KI-Agenten im Katalog, die autoevals bei den Sternen am nächsten stehen — zum Weiterstöbern auf beiden Seiten.

Hol dir autoevals

Kostenlos und offen — hol dir den Quellcode, gib dem Repository einen Stern und leg los.