PhialsBasement/LibreCrawl

ウェブサイトをクロールして SEO 分析や監査をする Web アプリケーション

完成アプリ自由に使える · MITデータ・クローリングPython難易度
1,016+18今週0 保存
210フォーク17Issue

中辛 の解説

LibreCrawl はウェブサイトのページ情報、リンク、SEO 要素、パフォーマンスを抽出する Web アプリケーションです。複数ユーザーの同時クロール、JavaScript レンダリング(React・Vue・Angular など)、PageSpeed Insights 統合、CSV・Excel・JSON・XML エクスポートに対応しています。自動スタートアップスクリプト(Windows は .bat、Linux/Mac は .sh)で Docker または Python 環境が自動検出され、全ての依存関係と Playwright ブラウザが自動インストールされます。ローカルモードでは認証なしで使用でき、個人利用に向いています。プラグイン API で /web/static/plugins/ に .js ファイルを追加するだけで機能を拡張できます。

こんなリポジトリです

こんなときに便利です

  • Screaming Frog や Deepcrawl などの有料 SEO ツール(年額 $279~)の代わりとしてウェブサイトの SEO 分析と監査をおこなう
  • 社内チームで複数のユーザーが同じ LibreCrawl インスタンスを通じて並行してウェブサイトをクロール・分析する
  • カスタム `.js` プラグインを開発して、既存の分析機能を組織固有の要件に合わせてカスタマイズする

主な機能

マルチテナント対応で複数ユーザーの同時クロールをサポートJavaScript レンダリングで React・Vue・Angular などの動的コンテンツに対応プラグイン API でカスタムタブと分析機能を拡張可能

このリポジトリの作り方

はじめてですか? むずかしくありません — 上から順にたどれば、自分の環境で動かして味見できます。

準備するもの

  • Docker と Docker Compose(Docker インストール方式の場合)
  • Python 3.8 以上(Python インストール方式の場合)
  • モダンな Web ブラウザ(Chrome・Firefox・Safari・Edge)

すぐに始める

  1. Linux/Mac で実行権限を付与します。
chmod +x start-librecrawl.sh
  1. スタートアップスクリプトを実行します。Docker または Python が自動検出されます。
./start-librecrawl.sh

ブラウザで http://localhost:5000 を開きます。


代案 1: Windows でスタートアップスクリプトを実行する場合

start-librecrawl.bat

代案 2: Docker で手動セットアップする場合

  1. レポジトリをクローンします。
git clone https://github.com/PhialsBasement/LibreCrawl.git
cd LibreCrawl
  1. 環境ファイルをコピーします。
cp .env.example .env
  1. Docker Compose で起動します。
docker compose up -d

ブラウザで http://localhost:5000 を開きます。


代案 3: Python で手動セットアップする場合

  1. 依存関係をインストールします。
pip install -r requirements.txt
  1. Playwright ブラウザをインストール(JavaScript レンダリング対応)します。
playwright install chromium
  1. ローカルモードで起動します。
python main.py --local

ブラウザで http://localhost:5000 を開きます。

ギット飯トライで味見

入れるのが面倒で少し不安だったなら — 安全スキャンからインストールまで、ターミナル一行で終わります。

ターミナルに貼り付ければ、ギット飯の安全スキャン → 隔離フォルダへ clone → インストール → 実行方法の案内まで自動です。はじめてでも大丈夫 — この一行だけです。

npx gitbap-try PhialsBasement/LibreCrawl

Node.js さえあれば、インストールなしで動きます · ギット飯トライとは? →

スター推移 · 7日

1,016+18 / 7日

確認日時

使いやすさ · まねしやすいか

まねしやすいサンプル評点 52/100
  • ゆるいライセンス
  • テストあり
  • サンプル集
  • 最近の更新
  • AGENTS.md
  • llms.txt
  • テンプレート

最近の更新あり · 2025 年に作成

「データ・クローリング」 こういうリポジトリを毎週受け取りませんか?

毎週月曜の朝、選んだ一膳だけ。広告なし · いつでも解除。

自分のリポジトリですか? README にギット飯バッジを貼る
[![깃밥](https://www.gitbap.com/badge/PhialsBasement/LibreCrawl.svg)](https://www.gitbap.com/r/PhialsBasement/LibreCrawl)
Claude からそのまま使う — ギット飯のつなぎ方

ギット飯を Claude につなぐと、こうしたリポジトリを Claude・Cursor・Codex から直接さがして試せます。

方法 ① コネクタ URL

Claude の設定 → コネクタにこのアドレスを貼り付け。

https://www.gitbap.com/api/mcp
方法 ② プラグイン(試用まで)

プラグインを入れると /gitbap-trending·/gitbap-try のスラッシュコマンドで、その場でリポジトリを試せます。Claude Code で下の 2 行を順に実行してください。

/plugin marketplace add jakeparkcolde/gitbap-cowork
/plugin install gitbap-cowork@gitbap
つなぎ方をくわしく →

AI が README をもとに要約しました · 原文を見る