// agents · strands-agents/evals

evals

evals é um projeto de agentes de IA de código aberto de strands-agents (strands-agents/evals no GitHub). Tem 230 estrelas no GitHub e 71 forks, é publicado sob a licença Apache-2.0 e foi atualizado pela última vez no GitHub em 7 de outubro de 2026.

A complete evaluation toolkit for AI agents.

★ 230 estrelas⑂ 71 forksApache-2.0atualizado out 2026
▦ visual: o README deste projeto não inclui nenhuma captura incorporável,
então aqui vai um marcador. O guia abaixo está completo mesmo assim.
// dados do projeto

Dados do projeto

Estrelas no GitHub
230
Forks
71
Licença
Apache-2.0
Última atualização no GitHub
7 de outubro de 2026
Categoria
Agentes de IA
Tipo de ficha
Guia de instalação completo
Site oficial
Official site
// como funciona

Como funciona

  1. Define what you want

    Write down the job you will use the project for before touching any code.

  2. Clone the repository

    Download the source and read the README's setup section first.

  3. Install dependencies

    Run the install steps and add any required API keys or config.

  4. Run the quickstart

    Follow the example in the docs to confirm everything works.

// recursos

Por que as pessoas gostam tanto

Agent evaluation

Measure agent quality systematically.

Comprehensive

Covers multiple evaluation dimensions.

LLM-app ready

Works for agents and LLM apps alike.

Strands ecosystem

From the Strands Agents team.

Python-native

Fits Python agent workflows.

Apache-2.0

Permissive licensing.

Advertisement
// execute você mesmo

Execute você mesmo

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/strands-agents/evals.git
    cd evals
  2. Step 2 — Install

    Set up a virtual environment and install dependencies.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 — Run an evaluation

    Execute a first eval per the README.

    # see README for the eval runners
// casos de uso

O que você pode criar

Advertisement
// perguntas frequentes

Perguntas frequentes

Who maintains evals?

It is maintained by the Strands Agents team at strands-agents/evals, with 71 forks.

Is evals free to use?

Yes. It is released under the Apache-2.0 license, which permits commercial use, modification, and redistribution. Read the LICENSE file for the exact terms.

Do I need a paid API to use it?

The framework is free; evaluations consume model calls through your own keys.

How does it compare to DeepEval?

Compare on metrics, workflow, and how tightly each fits your agent stack.

How do I get started?

Follow the README to run a first evaluation against your agent.

// continue explorando

Ferramentas semelhantes

Agentes de IA

bisheng

Enterprise LLM app platform: GenAI workflows, RAG, agents, model management, evaluation, fine-tuning.

★ 12,0 mil estrelasApache-2.0
Ver o guia →
Agentes de IA

vocode-core

Build voice-based LLM agents with a modular, open-source toolkit.

★ 3,8 mil estrelasMIT
Ver o guia →
Agentes de IA

promptfoo

Test prompts, agents and RAGs — LLM evals, red teaming and model comparisons from the CLI

★ 25,8 mil estrelasMIT
Ver o guia →
Agentes de IA

phoenix

Observability and evaluation for AI apps — see what your agents do.

★ 11,7 mil estrelasNOASSERTION
Ver o guia →
Agentes de IA

agent-governance-toolkit

Policy, identity, and sandboxing guardrails for AI agents.

★ 6,4 mil estrelasMIT
Ver o guia →
Agentes de IA

mantis

Google's modular toolkit that lets AI coding agents hunt, reproduce, and patch vulnerabilities autonomously.

★ 2,4 mil estrelasApache-2.0
Ver o guia →
// alternativas

Alternativas em Agentes de IA

Os outros projetos de Agentes de IA com mais estrelas no catálogo do LibreAI — a lista realista de alternativas se evals não for o ideal para você.

// mais em agents

Mais em Agentes de IA

Projetos de Agentes de IA próximos no catálogo, os mais próximos em estrelas de evals: continue explorando dos dois lados dele.

Baixe o evals

Grátis e aberto: pegue o código-fonte, dê uma estrela no repositório e comece a criar.