firecrawl/firecrawl

Firecrawl は、AI エージェント向けにウェブページからデータを取得するための既存プロジェクトです。11 月 18 日に公式が Firecrawl Local をリリースし、そのコードは本リポジトリの apps/local にあります。crates.io からインストールでき、単一のプログラムでウェブページをクリーンな Markdown に変換したり、サイト全体をクロールしたり、すべての URL をリストアップしたりできます。JavaScript が必要なページは、ローカルマシンに既存の Chrome を利用してレンダリングし、PDF や Office ドキュメントもローカルで解析されます。serve サブコマンドにより、ローカルの 3002 ポートでクラウドと同じ v2 インターフェースが提供され、ローカルルートでは API Key が不要です。検索、Alexandria データ、構造化抽出、および Agent は引き続き Firecrawl Cloud を経由する必要があります。

Firecrawl は、AI エージェント向けにウェブページからデータを取得するための既存プロジェクトです。11 月 18 日に公式が Firecrawl Local をリリースし、そのコードは本リポジトリの apps/local にあります。crates.io からインストールでき、単一のプログラムでウェブページをクリーンな Markdown に変換したり、サイト全体をクロールしたり、すべての URL をリストアップしたりできます。JavaScript が必要なページは、ローカルマシンに既存の Chrome を利用してレンダリングし、PDF や Office ドキュメントもローカルで解析されます。serve サブコマンドにより、ローカルの 3002 ポートでクラウドと同じ v2 インターフェースが提供され、ローカルルートでは API Key が不要です。検索、Alexandria データ、構造化抽出、および Agent は引き続き Firecrawl Cloud を経由する必要があります。

なぜ重要か ページの取得、サイト全体のクロール、URL のリストアップがすべてローカルマシンで完結し、データベース、キュー、コンテナは不要です。ローカルインターフェースはクラウドと同じため、既存のコードはアドレスを変更するだけで利用できます。

スター数 204248(+825 / 24h)

理由

  • 24 時間で新たに 825 スターが増加し、合計スター数は 204248 です(これは注目度を示すに過ぎません)。本体は AGPL-3.0、SDK と一部の UI コンポーネントは MIT ライセンスです
  • 公式の更新ログによると、Firecrawl Local は Rust ベースで完全なオープンソースであり、セルフホスト版より 37 倍高速で、メモリ使用量は 230 分の 1 です

使い方

  • Rust と C コンパイラをインストールした後、cargo install firecrawl-local を実行し、続いて firecrawl-local scrape https://firecrawl.dev --markdown を実行して 1 ページの取得をテストします。firecrawl-local init を実行すると、ローカルマシンの Claude Code、Cursor、Codex、Gemini CLI などに MCP サービスとして追加されます

リスク

  • デフォルトでは、ローカルで取得できなかった単一ページは Firecrawl Cloud に転送されて取得されます(結果には firecrawl-cloud と表示されます)。完全にローカル環境内だけで処理したい場合は、FIRECRAWL_CLOUD=off を設定してください
  • init は複数のエージェントツールの設定ファイルを書き換えます(事前にバックアップを作成します)。MCP サービスには Node.js 22 以上が必要です。AGPL-3.0 の部分をネットワークサービスとして提供する場合は、変更点を公開する必要があります

開く

Trendshift(GitHub Trending 快照)

最新の AI ニュースを見る