// local-llm · 0xMassi/webclaw

webclaw

webclaw — проект с открытым исходным кодом из категории «Локальные LLM» от 0xMassi (0xMassi/webclaw на GitHub). У него 2 366 звёзд на GitHub и 235 форков, он распространяется по лицензии AGPL-3.0 и последний раз обновлялся на GitHub 23 сентября 2026.

Fast Rust scraper that turns web pages into clean data for LLMs.

💎 Скрытая жемчужина★ 2,4 тыс. звёзд⑂ 235 форковAGPL-3.0обновлено сент. 2026
▦ визуал — в README этого проекта нет встраиваемого скриншота,
поэтому здесь заглушка. Руководство ниже в любом случае полное.
// факты о проекте

Факты о проекте

Репозиторий
0xMassi/webclaw
Звёзды GitHub
2 366
Форки
235
Лицензия
AGPL-3.0
Последнее обновление на GitHub
23 сентября 2026
Категория
Локальные LLM
Тип страницы
Скрытая жемчужина — более короткая страница для менее известного проекта
Официальный сайт
Official site
// как это работает

Как это работает

  1. Install webclaw

    Get the Rust-built binary or build from source.

  2. Point at a page

    Give it a URL to scrape or crawl.

  3. Extract

    Get clean markdown or structured data back.

  4. Feed your LLM

    Pipe results to agents via CLI, API, or MCP.

// возможности

Почему его любят

Rust speed

Fast extraction with low resource use.

Local-first

Runs on your machine, no cloud required.

HTML to markdown

Clean page conversion for LLMs.

Crawling

Follow links across whole sites.

REST API

Integrate extraction into any stack.

MCP server

Give AI agents direct scraping tools.

Advertisement
// запустите сами

Запустите сами

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/0xMassi/webclaw.git
    cd webclaw
  2. Step 2 — Check the README

    Every project documents its own setup; start with install requirements.

    cat README.md | head -60
  3. Step 3 — Run it

    Follow the project's launch command — Docker, pip, npm, or a binary release.

    # see README for the exact launch command
// сценарии использования

Что можно создать

Advertisement
// вопросы и ответы

Вопросы и ответы

How is it different from Firecrawl?

It is local-first and open source, so no per-page API fees.

What does AGPL-3.0 mean for me?

Commercial use is allowed, but network use of modified versions requires sharing source.

Can it handle JavaScript sites?

Check the docs for rendering capabilities.

Is there really an MCP server?

Yes, agents can call it through the Model Context Protocol.

Do I need Rust installed?

Only if building from source; binaries avoid that.

// продолжить изучение

Похожие инструменты

Локальные LLM

vLLM

A high-throughput and memory-efficient inference and serving engine for LLMs

★ 93,1 тыс. звёздApache-2.0
Смотреть руководство →
Локальные LLM

Web LLM

High-performance In-browser LLM Inference Engine

★ 19,2 тыс. звёздApache-2.0
Смотреть руководство →
Локальные LLM

Cactus

Quantization, kernels, runtime and inference engine for mobiles, wearables, smart home and robots

★ 6,1 тыс. звёздCustom (check repo)
Смотреть руководство →
Локальные LLM

WebMCP

Early proposal and implementation for connecting LLMs to web pages.

★ 883 звездыMIT
Смотреть руководство →
Локальные LLM

BrowserAI

Run local LLMs like Llama and DeepSeek right inside your web browser.

★ 1,5 тыс. звёздMIT
Смотреть руководство →
Локальные LLM

MNN

Alibaba's lightweight, blazing-fast inference engine for on-device LLMs and edge AI.

★ 16,2 тыс. звёздApache-2.0
Смотреть руководство →
// альтернативы

Альтернативы: Локальные LLM

Другие проекты из категории «Локальные LLM» с наибольшим числом звёзд в каталоге LibreAI — реалистичный список альтернатив, если webclaw вам не подходит.

// ещё в категории local-llm

Больше проектов: Локальные LLM

Соседние проекты из категории «Локальные LLM» в каталоге, ближайшие по числу звёзд к webclaw — продолжайте изучать полку по обе стороны от него.

Получить webclaw

Бесплатно и открыто — забирайте исходный код, ставьте звезду репозиторию и начинайте создавать.