ウェブサイトからメールアドレス・電話番号・ソーシャルメディアアカウントを自動抽出するスクレイピングツール
中辛 の解説
Python 3ベースのコマンドラインツールで、UIはStreamlitを採用しており入門者向けです。単一URLのスキャンから複数ファイルのバッチ処理まで対応し、すぐに実務で使えます。デモはブラウザUI（streamlit run app.py）でCSVやExcelの一括処理と進捗バーが確認できます。
こんなリポジトリです
こんなときに便利です
- 営業リスト作成時に企業ウェブサイトから担当者の連絡先を一括抽出できます。
- セキュリティ調査で対象組織のオンライン足跡とSNSプレゼンスを効率的に把握できます。
- CSVまたはExcelで複数サイトを指定して、バッチ処理でコンタクト情報を自動収集できます。
主な機能
ほかとの違い
ブラウザUIとコマンドラインの両方を備え、ユーザー拡張が容易な socials.txt 設定方式で、スタンドアロンな軽量スクレイピングツールとして設計されています。
このリポジトリの作り方
はじめてですか？ むずかしくありません — 上から順にたどれば、自分の環境で動かして味見できます。
準備するもの
- Python 3
すぐに始める
- リポジトリをクローンする
git clone https://github.com/champmq/TheScrapper.git
- ディレクトリに移動
cd TheScrapper
- 依存パッケージをインストール
pip3 install -r requirements.txt
- ウェブUIを起動（ブラウザでアクセス可能）
streamlit run app.py
- または、単一URLをスキャン
python3 TheScrapper.py --url https://example.com
- ページを辿ってクローリングするには
python3 TheScrapper.py --url https://example.com --crawl
ギット飯トライで味見
入れるのが面倒で少し不安だったなら — 安全スキャンからインストールまで、ターミナル一行で終わります。
ターミナルに貼り付ければ、ギット飯の安全スキャン → 隔離フォルダへ clone → インストール → 実行方法の案内まで自動です。はじめてでも大丈夫 — この一行だけです。
npx gitbap-try champmq/TheScrapper
Node.js さえあれば、インストールなしで動きます · ギット飯トライとは？ →
スター推移 · 7日
確認日時
使いやすさ · まねしやすいか
- ゆるいライセンス
- テストあり
- サンプル集
- 最近の更新
- AGENTS.md
- llms.txt
- テンプレート
最近の更新あり · 2021 年に作成
「データ・クローリング」 こういうリポジトリを毎週受け取りませんか？
毎週月曜の朝、選んだ一膳だけ。広告なし · いつでも解除。
自分のリポジトリですか？ README にギット飯バッジを貼る
[](https://www.gitbap.com/r/champmq/TheScrapper)Claude からそのまま使う — ギット飯のつなぎ方
ギット飯を Claude につなぐと、こうしたリポジトリを Claude・Cursor・Codex から直接さがして試せます。
Claude の設定 → コネクタにこのアドレスを貼り付け。
https://www.gitbap.com/api/mcpプラグインを入れると /gitbap-trending·/gitbap-try のスラッシュコマンドで、その場でリポジトリを試せます。Claude Code で下の 2 行を順に実行してください。
/plugin marketplace add jakeparkcolde/gitbap-cowork/plugin install gitbap-cowork@gitbapAI が README をもとに要約しました · 原文を見る