LibreAI / Agentes de IA / autoevals
// agents · braintrustdata/autoevals

autoevals

autoevals es un proyecto de agentes de IA de código abierto de braintrustdata (braintrustdata/autoevals en GitHub). Tiene 1.050 estrellas en GitHub y 88 bifurcaciones, se publica bajo la licencia MIT y se actualizó por última vez en GitHub el 7 de octubre de 2026.

Fast, best-practice evaluations for AI model outputs.

★ 1,1k estrellas⑂ 88 bifurcacionesMITactualizado oct 2026
▦ visual: el README de este proyecto no incluye ninguna captura incrustable,
así que aquí va un marcador. La guía de abajo está completa de todos modos.
// datos del proyecto

Datos del proyecto

Estrellas en GitHub
1.050
Bifurcaciones
88
Licencia
MIT
Última actualización en GitHub
7 de octubre de 2026
Categoría
Agentes de IA
Tipo de ficha
Guía de instalación completa
// cómo funciona

Cómo funciona

  1. Define the job

    Write down the task or workflow you want the agent to handle.

  2. Get the code

    Clone the repository and read the README's prerequisites.

  3. Set up your environment

    Install dependencies and configure keys or endpoints.

  4. Try the quickstart

    Run the sample script and check the output against the docs.

// características

Por qué gusta tanto

Ready-made scorers

Common eval patterns out of the box.

Best practices

Braintrust's eval expertise packaged.

Lightweight

A library, not a platform.

LLM-as-judge

Use models to score models.

Python-native

Drops into test suites.

MIT licensed

Free for any use.

Advertisement
// ejecútalo

Ejecútalo tú mismo

  1. Step 1 - Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/braintrustdata/autoevals.git
    cd autoevals
  2. Step 2 - Install dependencies

    Create a virtual environment and install the requirements.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 - Run an example

    Treat these as starting points - the README documents the exact commands.

    python examples/quickstart.py
// casos de uso

Qué puedes crear

Advertisement
// preguntas frecuentes

Preguntas frecuentes

Who is behind autoevals?

The project lives at braintrustdata/autoevals and has attracted 88 forks. Browse its commit history and contributor list for a sense of maintenance pace.

Is autoevals free to use?

Yes - it is MIT licensed, so you can use, modify, and distribute it freely, including in commercial projects.

Do I need a paid API to use it?

Running the evaluation is free; the model under test may use your own paid API keys.

AutoEvals vs Harbor?

AutoEvals is a lightweight scoring library; Harbor is a full evaluation framework. Start with AutoEvals for quick scoring, graduate to Harbor for a complete eval program.

Where should I start?

The README and the official docs site are the fastest path: run the quickstart example first, then adapt it to your use case.

// sigue explorando

Herramientas similares

Agentes de IA

tada

An open-source speech language model from Hume.

★ 1,0k estrellasNOASSERTION
Ver la guía →
Agentes de IA

openvla

Open-source 7B vision-language-action model and codebase for generalist robot manipulation.

★ 7,1k estrellasMIT
Ver la guía →
Agentes de IA

10x

Up to 20x faster AI coding with smart model routing and full self-hosting.

★ 1,4k estrellasMIT
Ver la guía →
Agentes de IA

agent-world-model

Snowflake's Agent World Model: synthesise 1,000 executable MCP tool-use environments for agentic RL.

★ 465 estrellasNOASSERTION
Ver la guía →
Agentes de IA

LightRAG

Simple, fast retrieval-augmented generation with graph smarts.

★ 40,0k estrellasMIT
Ver la guía →
Agentes de IA

genesis-world

A Python simulation platform for robotics and embodied AI — fast physics, rendering and learning

★ 30,0k estrellasApache-2.0
Ver la guía →
// alternativas

Alternativas en Agentes de IA

Los demás proyectos de Agentes de IA con más estrellas del catálogo de LibreAI: la lista realista de alternativas si autoevals no es lo que buscas.

// más en agents

Más en Agentes de IA

Proyectos de Agentes de IA cercanos en el catálogo, los más próximos en estrellas a autoevals: sigue explorando a ambos lados.

Consigue autoevals

Gratis y abierto: consigue el código fuente, dale una estrella al repositorio y empieza a crear.