TheCrawler
ストックにはログインが必要です
AI抽出を含むウェブスクレイピング — GPUは自社所有
Artificial Intelligence
Developer Tools
API
概要
GPUを自社保有し、AI抽出を含むウェブスクレイピングを提供。1クレジットは1ページ分、AIの追加課金なし。計測型競合のCOGSを再現できないコスト構造。根拠付き抽出で、値はページ本文に由来しなければnullを返す。
主な機能
- URLをマークダウン/JSONにスクレイプ(ブランドデータ・連絡先・表を含む)
- 抽出をあなたのスキーマへ適用、根拠付きバリデーション
- 有効な結果のみ課金、失敗/空の抽出は自動返金
- 自前のLLMを持ち込み可能(OpenAI互換エンドポイント対応)
- ウェブ検索、署名付きウェブフックを使った非同期バッチ、変更監視
- Claude Code/Cursor 内で動作する MCP サーバー
注意点
- ボット対策の厳しいサイトはブロックされる可能性
- MCPはSTDIOのみ、現状はステルス/リソデンシャルプロキシ等は未対応
料金/導入
- 無料枠500ページ、カード不要
投票数: 4