// rag · llmware-ai/llmware

llmware

llmwareは、llmware-aiが公開しているオープンソースのRAG・知識ベースプロジェクトです(GitHub: llmware-ai/llmware)。GitHubスターは14,821、フォークは2,930で、Apache-2.0ライセンスの下で公開されています。GitHubでの最終更新は2026年10月1日です。

Unified framework for enterprise RAG pipelines with small, specialized models - local, private and secure.

★ 14.8k スター⑂ 2.9k フォークApache-2.0更新 2026年10月
▦ ビジュアル — このプロジェクトのREADMEには埋め込み可能なスクリーンショットがないため、
ここではプレースホルダーを表示しています。下のガイド自体は完全な内容です。
// プロジェクトの基本情報

プロジェクト基本情報

リポジトリ
llmware-ai/llmware
GitHubスター
14,821
フォーク
2,930
ライセンス
Apache-2.0
GitHubでの最終更新
2026年10月1日
掲載タイプ
完全なインストールガイド
公式サイト
Official site
// 仕組み

仕組み

  1. Decide what runs locally

    Plan your pipeline around small, specialized on-device models for privacy and cost, adding a cloud model only for steps that truly need one.

  2. Install llmware

    Add the Python package to your environment; virtually all examples and models can run on a laptop.

  3. Build a library

    Create a Library, add a folder of mixed documents (PDF, Office, text, images and more) to parse, chunk and index them, then install an embedding.

  4. Query and prompt with sources

    Run text, semantic or hybrid queries over the library and feed the results into a Prompt so answers are grounded in your documents, with evidence checks.

// 機能

選ばれる理由

300+ model catalog

Access all models the same way through ModelCatalog, regardless of implementation - GGUF, OpenVINO, ONNX Runtime, Hugging Face, Sentence Transformers or API models.

Small specialized models

50+ llmware fine-tuned SLIM, Bling, Dragon and Industry-BERT models (roughly 1-7B parameters) designed for RAG workflows and enterprise process-automation tasks on device.

Full document ingestion

The Library add_files function parses and chunks many formats - pdf, pptx, docx, xlsx, txt, csv, md, json, wav, png, jpg, html - routed automatically by file type.

Flexible retrieval

Query libraries with text, semantic, hybrid and metadata-filtered queries, and mix and match embedding models and vector databases on the same library.

Prompt with sources

Attach files or query results directly to a Prompt as model-ready context, then run post-inference evidence checks against the sources.

Runs anywhere

Optimized for Windows, Mac and Linux across AI PC, laptop, edge and self-hosted deployments, including GPU and NPU acceleration paths.

Advertisement
// 自分で実行

自分で実行してみる

  1. Clone the repository

    Clone llmware for the full examples collection; most users install from PyPI instead.

    git clone https://github.com/llmware-ai/llmware.git
    cd llmware
  2. Install the package

    Install llmware into your Python environment.

    pip install llmware
  3. Run a first RAG example

    Load a small catalog model and ask a question with context, following the README's ModelCatalog and Prompt examples.

    python -c "from llmware.models import ModelCatalog; print(ModelCatalog().list_all_models())"  # see README examples for the full workflow
// 活用例

作れるもの

Advertisement
// よくある質問

よくある質問

Who maintains llmware?

llmware is developed by llmware-ai (AI Bloks) with open-source contributors.

Is llmware free to use?

Yes. The framework is Apache-2.0 licensed; individual models in the catalog carry their own licenses.

Does it need a paid API key?

No for local models: the catalog's open models run on your machine. Cloud models from OpenAI, Anthropic or Google are optional and would use your own keys.

How does llmware compare with LangChain or LlamaIndex?

Those are general orchestration frameworks that assume you bring models and infrastructure; llmware bundles an optimized model catalog of small local models with the full RAG pipeline in one opinionated framework.

How do I get started?

Run pip install llmware, create a Library from a folder of documents, install an embedding, and run your first semantic query.

// さらに探索

似ているツール

RAG・知識ベース

private-gpt

Complete API layer for private AI apps on local models: RAG, skills, tools, MCP and text-to-SQL

★ 57.6k スターApache-2.0
ガイドを見る →
RAG・知識ベース

UltraRAG

A low-code MCP framework for building complex, innovative RAG pipelines — visibly, not as a black box.

★ 5.7k スターApache-2.0
ガイドを見る →
RAG・知識ベース

llm-app

Ready-to-run templates for RAG, AI pipelines and enterprise search that stay in sync with live data

★ 58.8k スターMIT
ガイドを見る →
RAG・知識ベース

Langchain-Chatchat

Local knowledge-base RAG and agent app built on LangChain with ChatGLM, Qwen and Llama models

★ 38.7k スターApache-2.0
ガイドを見る →
RAG・知識ベース

docuchat.app

Private document chat for attorneys: local LLMs, verifiable citations.

★ 35 スターMIT
ガイドを見る →
RAG・知識ベース

DocsGPT

A private AI platform for agents, assistants and enterprise search over your documents

★ 18.3k スターMIT
ガイドを見る →
// 代替候補

代替候補: RAG・知識ベース

LibreAIカタログに掲載されたRAG・知識ベースプロジェクトの中で最もスターの多いもの — llmwareが合わなかった場合に検討したい、現実的な候補リストです。

// さらに見る rag

さらに見る: RAG・知識ベース

カタログの中でllmwareとスター数が近いRAG・知識ベースプロジェクト — 前後の棚もそのまま見て回れます。

llmwareを入手する

無料でオープン — ソースコードを入手して、リポジトリにスターを付け、作り始めましょう。