// agents · openvla/openvla

openvla

openvla — проект с открытым исходным кодом из категории «ИИ-агенты» от openvla (openvla/openvla на GitHub). У него 7 123 звезды на GitHub и 854 форка, он распространяется по лицензии MIT и последний раз обновлялся на GitHub 23 марта 2025.

Open-source 7B vision-language-action model and codebase for generalist robot manipulation.

★ 7,1 тыс. звёзд⑂ 854 форкаMITобновлено март 2025
▦ визуал — в README этого проекта нет встраиваемого скриншота,
поэтому здесь заглушка. Руководство ниже в любом случае полное.
// факты о проекте

Факты о проекте

Репозиторий
openvla/openvla
Звёзды GitHub
7 123
Форки
854
Лицензия
MIT
Последнее обновление на GitHub
23 марта 2025
Категория
ИИ-агенты
Тип страницы
Полное руководство по установке
// как это работает

Как это работает

  1. Check your hardware first

    Inference and LoRA fine-tuning need a capable NVIDIA GPU; the README's LoRA example uses a single A100 80GB, and smaller GPUs down to roughly 27GB can work with reduced batch sizes.

  2. Install for inference or training

    For inference, install the minimal requirements and load the checkpoint through Hugging Face transformers; for training, create the conda environment and install the repo editable.

  3. Run zero-shot inference

    Load openvla/openvla-7b with the AutoProcessor, pass a camera image and an instruction prompt, and read out an action with predict_action.

  4. Fine-tune on your robot

    Download a BridgeData V2 or other Open X-Embodiment dataset in RLDS format (or convert your own), then run the LoRA fine-tuning script - or the newer OFT recipe the project now recommends.

// возможности

Почему его любят

Flagship 7B checkpoint

openvla-7b is trained on a mixture of Open X-Embodiment datasets spanning 970K trajectories, with checkpoints, configs and model cards on Hugging Face.

Minimal-dependency inference

A lightweight transformers interface (AutoProcessor and AutoModelForVision2Seq) loads the model with few dependencies, and a REST API serving script is included for robot stacks without on-device compute.

LoRA and full fine-tuning

Built-in examples cover full, partial and (quantized) LoRA fine-tuning via Hugging Face PEFT, plus full fine-tuning with PyTorch FSDP for multi-GPU nodes.

Scales from 1B to 34B

PyTorch FSDP and Flash-Attention power training across model sizes, with native support for arbitrary RLDS dataset mixtures.

FAST action tokenizer support

The project documents the FAST tokenizer, which compresses action chunks into fewer tokens for much faster inference with discrete actions.

OFT fine-tuning recipe

The 2025 OFT update offers an optimized fine-tuning recipe the team recommends for faster inference, higher success rates, multiple input images and high-frequency bimanual control.

Advertisement
// запустите сами

Запустите сами

  1. Clone the repository

    Clone the OpenVLA codebase for the training, fine-tuning and serving scripts.

    git clone https://github.com/openvla/openvla.git
    cd openvla
  2. Create the environment and install

    Set up the pinned Python 3.10 / PyTorch 2.2 environment from the README, then install the package editable.

    conda create -n openvla python=3.10 -y
    conda activate openvla
    pip install -e .
  3. Load the model for inference

    Install the minimal requirements and load openvla-7b in a few lines of Python.

    pip install -r https://raw.githubusercontent.com/openvla/openvla/main/requirements-min.txt
    python -c "from transformers import AutoProcessor; AutoProcessor.from_pretrained('openvla/openvla-7b', trust_remote_code=True)"  # see README for the full inference example
// сценарии использования

Что можно создать

Advertisement
// вопросы и ответы

Вопросы и ответы

Who maintains OpenVLA?

The OpenVLA project team maintains the repository; it is built on the Prismatic VLMs codebase and released alongside the OpenVLA research paper.

Is OpenVLA free to use?

The code is MIT-licensed. The pretrained checkpoints are derived from Llama-2, so their use is governed by the Llama Community License rather than MIT - check its terms before commercial deployment.

Does it need a paid API key?

No. Models run locally from Hugging Face checkpoints; you need your own GPU, not any hosted API.

How does OpenVLA compare with openpi?

Both are open VLA projects: OpenVLA centers on a single 7B autoregressive model with public training code and LoRA/OFT recipes, while openpi focuses on Physical Intelligence's pi-series flow-matching models.

How do I get started?

Install the minimal requirements, load openvla/openvla-7b with transformers, and run the README's inference example with a sample image and instruction.

// продолжить изучение

Похожие инструменты

ИИ-агенты

openpi

Physical Intelligence's open vision-language-action models (pi0, pi0-FAST, pi0.5) for robot policies.

★ 14,1 тыс. звёздApache-2.0
Смотреть руководство →
ИИ-агенты

tada

An open-source speech language model from Hume.

★ 1,0 тыс. звёздNOASSERTION
Смотреть руководство →
ИИ-агенты

Isaac-GR00T

NVIDIA Isaac GR00T N1.7 — an open foundation model for generalist robots, ready to fine-tune and deploy.

★ 8,2 тыс. звёздApache-2.0
Смотреть руководство →
ИИ-агенты

Qwen-AgentWorld

Qwen-AgentWorld: a language world model simulating MCP, terminal, web, and OS environments for agents.

★ 1,0 тыс. звёздApache-2.0
Смотреть руководство →
ИИ-агенты

Jev Ultrafast

Jev Ultrafast — the fastest browser agent from browser-use: one decision-model request per action cycle drives a real browser, MIT

★ 23,7 тыс. звёздMIT
Смотреть руководство →
ИИ-агенты

LaVague

A Large Action Model framework for building AI web agents that browse and act for you.

★ 6,4 тыс. звёздApache-2.0
Смотреть руководство →
// альтернативы

Альтернативы: ИИ-агенты

Другие проекты из категории «ИИ-агенты» с наибольшим числом звёзд в каталоге LibreAI — реалистичный список альтернатив, если openvla вам не подходит.

// ещё в категории agents

Больше проектов: ИИ-агенты

Соседние проекты из категории «ИИ-агенты» в каталоге, ближайшие по числу звёзд к openvla — продолжайте изучать полку по обе стороны от него.

Получить openvla

Бесплатно и открыто — забирайте исходный код, ставьте звезду репозиторию и начинайте создавать.