// agents · om-ai-lab/OmAgent

OmAgent

OmAgentは、om-ai-labが公開しているオープンソースのAIエージェントプロジェクトです(GitHub: om-ai-lab/OmAgent)。GitHubスターは2,667、フォークは291で、Apache-2.0ライセンスの下で公開されています。GitHubでの最終更新は2025年3月19日です。

Python library for building multimodal language agents — VLM, video and mobile, fast to prototype and ship

★ 2.7k スター⑂ 291 フォークApache-2.0更新 2025年3月
▦ ビジュアル — このプロジェクトのREADMEには埋め込み可能なスクリーンショットがないため、
ここではプレースホルダーを表示しています。下のガイド自体は完全な内容です。
// プロジェクトの基本情報

プロジェクト基本情報

リポジトリ
om-ai-lab/OmAgent
GitHubスター
2,667
フォーク
291
ライセンス
Apache-2.0
GitHubでの最終更新
2025年3月19日
掲載タイプ
完全なインストールガイド
公式サイト
Official site
// 仕組み

仕組み

  1. Clarify your goal

    Pick a multimodal task — e.g. answering questions about a video, a visual QA web app, or a phone-connected assistant.

  2. Get OmAgent

    pip install omagent-core, or clone the repo to work from the examples.

  3. Install and configure

    Generate container.yaml for an example with compile_container.py, and set your LLM key/endpoint (or point it at a local Ollama model) in configs/llms.

  4. Run your first agent

    Run the simple VQA example's webpage demo and ask a question about an image.

// 機能

選ばれる理由

Graph workflow engine

A flexible architecture with graph-based workflow orchestration and various memory types for contextual reasoning.

Native multimodality

Built-in support for VLM models, real-time APIs, computer vision models, video processing and mobile device connection.

Agent algorithms included

State-of-the-art unimodal and multimodal agent algorithms beyond simple LLM reasoning, e.g. ReAct, CoT and SC-CoT, packaged as reusable operators.

Local model support

Deploy your own models locally with Ollama or LocalAI instead of hosted APIs.

Distributed or Lite

A fully distributed architecture with custom scaling, or Lite mode that eliminates middleware deployment.

Worked examples

Video QA agent (Gradio app), mobile personal assistant, and an agentic-operators comparison project are included.

Advertisement
// 自分で実行

自分で実行してみる

  1. Clone the repo

    Clone OmAgent to use its examples; the library itself installs from PyPI in step 2.

    git clone https://github.com/om-ai-lab/OmAgent.git
    cd OmAgent
  2. Install the library

    Install omagent_core from PyPI (Python >= 3.10).

    pip install omagent-core
  3. Run the VQA demo

    Generate the example config and launch the webpage demo on http://127.0.0.1:7860.

    cd examples/step1_simpleVQA
    python compile_container.py
    python run_webpage.py
// 活用例

作れるもの

Advertisement
// よくある質問

よくある質問

Who maintains OmAgent?

om-ai-lab maintains it; the framework paper is Zhang et al., 2024 (arXiv:2406.16620), presented in the EMNLP 2024 context.

Is OmAgent free?

Yes, Apache-2.0 licensed.

Does it need a paid API key?

Only if you choose a hosted LLM/VLM — set your OpenAI-compatible key in the config, or run local models with Ollama/LocalAI instead.

How does it compare to LangChain-style frameworks?

The authors aim for a simpler interface with less overhead, while natively covering multimodal inputs (video, vision, mobile) that text-first frameworks treat as add-ons.

How do I get started?

pip install omagent-core, then run the step1_simpleVQA example: compile_container.py, configure your LLM, and python run_webpage.py.

// さらに探索

似ているツール

AIエージェント

rivet

Rivet is Ironclad's visual IDE and TypeScript library for building complex AI agents and prompt chains

★ 4.7k スターMIT
ガイドを見る →
AIエージェント

adk-python

Google's code-first toolkit for building real AI agents.

★ 21.7k スターApache-2.0
ガイドを見る →
AIエージェント

MobileAgent

Mobile-Agent — multimodal GUI agents that operate phones and PCs from screenshots and instructions.

★ 9.3k スターMIT
ガイドを見る →
AIエージェント

antigravity-sdk-python

Google's Python SDK for building AI agents on the Antigravity platform and Gemini models.

★ 3.7k スターApache-2.0
ガイドを見る →
AIエージェント

smolagents

smolagents — Hugging Face's barebones agent library where agents think in code: a CodeAgent that writes its actions as Python, model-agnostic, Apache-2.0

★ 29.9k スターApache-2.0
ガイドを見る →
AIエージェント

agent-framework

A framework for building, orchestrating and deploying AI agents and multi-agent workflows with support for Python and .NET.

★ 13.9k スターMIT
ガイドを見る →
// 代替候補

代替候補: AIエージェント

LibreAIカタログに掲載されたAIエージェントプロジェクトの中で最もスターの多いもの — OmAgentが合わなかった場合に検討したい、現実的な候補リストです。

// さらに見る agents

さらに見る: AIエージェント

カタログの中でOmAgentとスター数が近いAIエージェントプロジェクト — 前後の棚もそのまま見て回れます。

OmAgentを入手する

無料でオープン — ソースコードを入手して、リポジトリにスターを付け、作り始めましょう。