// agents · strands-agents/evals

evals

evals es un proyecto de agentes de IA de código abierto de strands-agents (strands-agents/evals en GitHub). Tiene 230 estrellas en GitHub y 71 bifurcaciones, se publica bajo la licencia Apache-2.0 y se actualizó por última vez en GitHub el 7 de octubre de 2026.

A complete evaluation toolkit for AI agents.

★ 230 estrellas⑂ 71 bifurcacionesApache-2.0actualizado oct 2026
▦ visual: el README de este proyecto no incluye ninguna captura incrustable,
así que aquí va un marcador. La guía de abajo está completa de todos modos.
// datos del proyecto

Datos del proyecto

Estrellas en GitHub
230
Bifurcaciones
71
Licencia
Apache-2.0
Última actualización en GitHub
7 de octubre de 2026
Categoría
Agentes de IA
Tipo de ficha
Guía de instalación completa
Sitio oficial
Official site
// cómo funciona

Cómo funciona

  1. Define what you want

    Write down the job you will use the project for before touching any code.

  2. Clone the repository

    Download the source and read the README's setup section first.

  3. Install dependencies

    Run the install steps and add any required API keys or config.

  4. Run the quickstart

    Follow the example in the docs to confirm everything works.

// características

Por qué gusta tanto

Agent evaluation

Measure agent quality systematically.

Comprehensive

Covers multiple evaluation dimensions.

LLM-app ready

Works for agents and LLM apps alike.

Strands ecosystem

From the Strands Agents team.

Python-native

Fits Python agent workflows.

Apache-2.0

Permissive licensing.

Advertisement
// ejecútalo

Ejecútalo tú mismo

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/strands-agents/evals.git
    cd evals
  2. Step 2 — Install

    Set up a virtual environment and install dependencies.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 — Run an evaluation

    Execute a first eval per the README.

    # see README for the eval runners
// casos de uso

Qué puedes crear

Advertisement
// preguntas frecuentes

Preguntas frecuentes

Who maintains evals?

It is maintained by the Strands Agents team at strands-agents/evals, with 71 forks.

Is evals free to use?

Yes. It is released under the Apache-2.0 license, which permits commercial use, modification, and redistribution. Read the LICENSE file for the exact terms.

Do I need a paid API to use it?

The framework is free; evaluations consume model calls through your own keys.

How does it compare to DeepEval?

Compare on metrics, workflow, and how tightly each fits your agent stack.

How do I get started?

Follow the README to run a first evaluation against your agent.

// sigue explorando

Herramientas similares

Agentes de IA

bisheng

Enterprise LLM app platform: GenAI workflows, RAG, agents, model management, evaluation, fine-tuning.

★ 12,0k estrellasApache-2.0
Ver la guía →
Agentes de IA

vocode-core

Build voice-based LLM agents with a modular, open-source toolkit.

★ 3,8k estrellasMIT
Ver la guía →
Agentes de IA

promptfoo

Test prompts, agents and RAGs — LLM evals, red teaming and model comparisons from the CLI

★ 25,8k estrellasMIT
Ver la guía →
Agentes de IA

phoenix

Observability and evaluation for AI apps — see what your agents do.

★ 11,7k estrellasNOASSERTION
Ver la guía →
Agentes de IA

agent-governance-toolkit

Policy, identity, and sandboxing guardrails for AI agents.

★ 6,4k estrellasMIT
Ver la guía →
Agentes de IA

mantis

Google's modular toolkit that lets AI coding agents hunt, reproduce, and patch vulnerabilities autonomously.

★ 2,4k estrellasApache-2.0
Ver la guía →
// alternativas

Alternativas en Agentes de IA

Los demás proyectos de Agentes de IA con más estrellas del catálogo de LibreAI: la lista realista de alternativas si evals no es lo que buscas.

// más en agents

Más en Agentes de IA

Proyectos de Agentes de IA cercanos en el catálogo, los más próximos en estrellas a evals: sigue explorando a ambos lados.

Consigue evals

Gratis y abierto: consigue el código fuente, dale una estrella al repositorio y empieza a crear.