// local-llm · 0xMassi/webclaw

webclaw

webclawは、0xMassiが公開しているオープンソースのローカルLLMプロジェクトです(GitHub: 0xMassi/webclaw)。GitHubスターは2,366、フォークは235で、AGPL-3.0ライセンスの下で公開されています。GitHubでの最終更新は2026年9月23日です。

Fast Rust scraper that turns web pages into clean data for LLMs.

💎 隠れた名作★ 2.4k スター⑂ 235 フォークAGPL-3.0更新 2026年9月
▦ ビジュアル — このプロジェクトのREADMEには埋め込み可能なスクリーンショットがないため、
ここではプレースホルダーを表示しています。下のガイド自体は完全な内容です。
// プロジェクトの基本情報

プロジェクト基本情報

リポジトリ
0xMassi/webclaw
GitHubスター
2,366
フォーク
235
ライセンス
AGPL-3.0
GitHubでの最終更新
2026年9月23日
カテゴリ
ローカルLLM
掲載タイプ
隠れた名作 — あまり知られていないプロジェクトのための短めのページ
公式サイト
Official site
// 仕組み

仕組み

  1. Install webclaw

    Get the Rust-built binary or build from source.

  2. Point at a page

    Give it a URL to scrape or crawl.

  3. Extract

    Get clean markdown or structured data back.

  4. Feed your LLM

    Pipe results to agents via CLI, API, or MCP.

// 機能

選ばれる理由

Rust speed

Fast extraction with low resource use.

Local-first

Runs on your machine, no cloud required.

HTML to markdown

Clean page conversion for LLMs.

Crawling

Follow links across whole sites.

REST API

Integrate extraction into any stack.

MCP server

Give AI agents direct scraping tools.

Advertisement
// 自分で実行

自分で実行してみる

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/0xMassi/webclaw.git
    cd webclaw
  2. Step 2 — Check the README

    Every project documents its own setup; start with install requirements.

    cat README.md | head -60
  3. Step 3 — Run it

    Follow the project's launch command — Docker, pip, npm, or a binary release.

    # see README for the exact launch command
// 活用例

作れるもの

Advertisement
// よくある質問

よくある質問

How is it different from Firecrawl?

It is local-first and open source, so no per-page API fees.

What does AGPL-3.0 mean for me?

Commercial use is allowed, but network use of modified versions requires sharing source.

Can it handle JavaScript sites?

Check the docs for rendering capabilities.

Is there really an MCP server?

Yes, agents can call it through the Model Context Protocol.

Do I need Rust installed?

Only if building from source; binaries avoid that.

// さらに探索

似ているツール

ローカルLLM

vLLM

A high-throughput and memory-efficient inference and serving engine for LLMs

★ 93.1k スターApache-2.0
ガイドを見る →
ローカルLLM

Web LLM

High-performance In-browser LLM Inference Engine

★ 19.2k スターApache-2.0
ガイドを見る →
ローカルLLM

Cactus

Quantization, kernels, runtime and inference engine for mobiles, wearables, smart home and robots

★ 6.1k スターCustom (check repo)
ガイドを見る →
ローカルLLM

WebMCP

Early proposal and implementation for connecting LLMs to web pages.

★ 883 スターMIT
ガイドを見る →
ローカルLLM

BrowserAI

Run local LLMs like Llama and DeepSeek right inside your web browser.

★ 1.5k スターMIT
ガイドを見る →
ローカルLLM

MNN

Alibaba's lightweight, blazing-fast inference engine for on-device LLMs and edge AI.

★ 16.2k スターApache-2.0
ガイドを見る →
// 代替候補

代替候補: ローカルLLM

LibreAIカタログに掲載されたローカルLLMプロジェクトの中で最もスターの多いもの — webclawが合わなかった場合に検討したい、現実的な候補リストです。

// さらに見る local-llm

さらに見る: ローカルLLM

カタログの中でwebclawとスター数が近いローカルLLMプロジェクト — 前後の棚もそのまま見て回れます。

webclawを入手する

無料でオープン — ソースコードを入手して、リポジトリにスターを付け、作り始めましょう。