// agents · strands-agents/evals

evals

evals — проект с открытым исходным кодом из категории «ИИ-агенты» от strands-agents (strands-agents/evals на GitHub). У него 230 звёзд на GitHub и 71 форк, он распространяется по лицензии Apache-2.0 и последний раз обновлялся на GitHub 7 октября 2026.

A complete evaluation toolkit for AI agents.

★ 230 звёзд⑂ 71 форкApache-2.0обновлено окт. 2026
▦ визуал — в README этого проекта нет встраиваемого скриншота,
поэтому здесь заглушка. Руководство ниже в любом случае полное.
// факты о проекте

Факты о проекте

Репозиторий
strands-agents/evals
Звёзды GitHub
230
Форки
71
Лицензия
Apache-2.0
Последнее обновление на GitHub
7 октября 2026
Категория
ИИ-агенты
Тип страницы
Полное руководство по установке
Официальный сайт
Official site
// как это работает

Как это работает

  1. Define what you want

    Write down the job you will use the project for before touching any code.

  2. Clone the repository

    Download the source and read the README's setup section first.

  3. Install dependencies

    Run the install steps and add any required API keys or config.

  4. Run the quickstart

    Follow the example in the docs to confirm everything works.

// возможности

Почему его любят

Agent evaluation

Measure agent quality systematically.

Comprehensive

Covers multiple evaluation dimensions.

LLM-app ready

Works for agents and LLM apps alike.

Strands ecosystem

From the Strands Agents team.

Python-native

Fits Python agent workflows.

Apache-2.0

Permissive licensing.

Advertisement
// запустите сами

Запустите сами

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/strands-agents/evals.git
    cd evals
  2. Step 2 — Install

    Set up a virtual environment and install dependencies.

    python -m venv .venv && source .venv/bin/activate
    pip install -r requirements.txt
  3. Step 3 — Run an evaluation

    Execute a first eval per the README.

    # see README for the eval runners
// сценарии использования

Что можно создать

Advertisement
// вопросы и ответы

Вопросы и ответы

Who maintains evals?

It is maintained by the Strands Agents team at strands-agents/evals, with 71 forks.

Is evals free to use?

Yes. It is released under the Apache-2.0 license, which permits commercial use, modification, and redistribution. Read the LICENSE file for the exact terms.

Do I need a paid API to use it?

The framework is free; evaluations consume model calls through your own keys.

How does it compare to DeepEval?

Compare on metrics, workflow, and how tightly each fits your agent stack.

How do I get started?

Follow the README to run a first evaluation against your agent.

// продолжить изучение

Похожие инструменты

ИИ-агенты

bisheng

Enterprise LLM app platform: GenAI workflows, RAG, agents, model management, evaluation, fine-tuning.

★ 12,0 тыс. звёздApache-2.0
Смотреть руководство →
ИИ-агенты

vocode-core

Build voice-based LLM agents with a modular, open-source toolkit.

★ 3,8 тыс. звёздMIT
Смотреть руководство →
ИИ-агенты

promptfoo

Test prompts, agents and RAGs — LLM evals, red teaming and model comparisons from the CLI

★ 25,8 тыс. звёздMIT
Смотреть руководство →
ИИ-агенты

phoenix

Observability and evaluation for AI apps — see what your agents do.

★ 11,7 тыс. звёздNOASSERTION
Смотреть руководство →
ИИ-агенты

agent-governance-toolkit

Policy, identity, and sandboxing guardrails for AI agents.

★ 6,4 тыс. звёздMIT
Смотреть руководство →
ИИ-агенты

mantis

Google's modular toolkit that lets AI coding agents hunt, reproduce, and patch vulnerabilities autonomously.

★ 2,4 тыс. звёздApache-2.0
Смотреть руководство →
// альтернативы

Альтернативы: ИИ-агенты

Другие проекты из категории «ИИ-агенты» с наибольшим числом звёзд в каталоге LibreAI — реалистичный список альтернатив, если evals вам не подходит.

// ещё в категории agents

Больше проектов: ИИ-агенты

Соседние проекты из категории «ИИ-агенты» в каталоге, ближайшие по числу звёзд к evals — продолжайте изучать полку по обе стороны от него.

Получить evals

Бесплатно и открыто — забирайте исходный код, ставьте звезду репозиторию и начинайте создавать.