LibreAI / 自動化 / scrapai-cli
// automation · discourselab/scrapai-cli

scrapai-cli

scrapai-cliは、discourselabが公開しているオープンソースの自動化プロジェクトです(GitHub: discourselab/scrapai-cli)。GitHubスターは116、フォークは17で、Apache-2.0ライセンスの下で公開されています。GitHubでの最終更新は2026年9月29日です。

Describe the data you want; get a production-ready Scrapy spider.

💎 隠れた名作★ 116 スター⑂ 17 フォークApache-2.0更新 2026年9月
▦ ビジュアル — このプロジェクトのREADMEには埋め込み可能なスクリーンショットがないため、
ここではプレースホルダーを表示しています。下のガイド自体は完全な内容です。
// プロジェクトの基本情報

プロジェクト基本情報

GitHubスター
116
フォーク
17
ライセンス
Apache-2.0
GitHubでの最終更新
2026年9月29日
カテゴリ
自動化
掲載タイプ
隠れた名作 — あまり知られていないプロジェクトのための短めのページ
公式サイト
Official docs
// 仕組み

仕組み

  1. Install the CLI

    Get it from PyPI into your environment.

  2. Describe your target

    Tell it the site and the data you want.

  3. Generate the spider

    Receive a production-ready Scrapy spider.

  4. Run and reuse

    Execute the spider whenever you need fresh data.

// 機能

選ばれる理由

Natural-language input

Describe data needs in plain words.

Scrapy output

Real spiders you can inspect and own.

Cloudflare handling

Bypass smarts for protected sites.

Production-ready

Generated code meant for real runs.

Python CLI

Fits terminal-first workflows.

Reusable spiders

Write once, run forever.

Advertisement
// 自分で実行

自分で実行してみる

  1. Step 1 — Install the CLI

    Get it from PyPI.

    pip install scrapai-cli
  2. Step 2 — Generate a spider

    Describe the site and data you want.

    scrapai generate "product prices from example-shop.com"
  3. Step 3 — Run the spider

    Execute the generated Scrapy spider.

    scrapy crawl example_shop
// 活用例

作れるもの

Advertisement
// よくある質問

よくある質問

Who maintains scrapai-cli?

It is an open-source project at discourselab/scrapai-cli with 17 forks.

Is it free for commercial use?

Yes. It is Apache-2.0 licensed.

Do I own the generated spiders?

Yes. They are standard Scrapy code you keep and modify.

Can it handle Cloudflare-protected sites?

It advertises Cloudflare bypass capabilities — results vary by site.

Is scraping legal?

Only scrape sites you have permission to scrape; respect terms and robots.txt.

// さらに探索

似ているツール

自動化

just-scrape

CLI for AI scraping, extraction, and scheduled page-change alerts.

★ 67 スターMIT
ガイドを見る →
自動化

actor-rag-web-browser

Apify actor that feeds RAG pipelines with fresh scraped web text.

★ 80 スターApache-2.0
ガイドを見る →
AIエージェント

openserp

Self-hosted SERP API: browser-rendered search from six engines.

★ 1.4k スターMIT
ガイドを見る →
自動化

taipy

Turns Data and AI algorithms into production-ready web applications in no time.

★ 19.4k スターApache-2.0
ガイドを見る →
自動化

livecontext-ce

Self-hosted AI automation: describe the job in chat and it builds the flow.

★ 660 スターCustom
ガイドを見る →
自動化

comanda

CLI orchestrator that runs AI agent workflows from declarative YAML.

★ 328 スターMIT
ガイドを見る →
// 代替候補

代替候補: 自動化

LibreAIカタログに掲載された自動化プロジェクトの中で最もスターの多いもの — scrapai-cliが合わなかった場合に検討したい、現実的な候補リストです。

// さらに見る automation

さらに見る: 自動化

カタログの中でscrapai-cliとスター数が近い自動化プロジェクト — 前後の棚もそのまま見て回れます。

scrapai-cliを入手する

無料でオープン — ソースコードを入手して、リポジトリにスターを付け、作り始めましょう。