ScraperAPI は、 Webスクレイピング用のプロキシ+レンダリングAPI: URL を送信すると、プロキシがローテーションされ、CAPTCHA が解決され、(オプションで) JavaScript がレンダリングされて、生の HTML が返されます。請求されています APIクレジット、リクエストが難しいほど、より多くのクレジットがかかります。料金、無料トライアル、開始方法は次のとおりです。
| プラン | 価格 | API クレジット / 月 |
|---|---|---|
| 無料トライアル 無料 | $0 | ~5,000 クレジット (~7 日間) |
| 趣味 | ～$49/月から | ～100,000クレジット |
| 起動する | ～$149/月から | ~1,000,000 クレジット |
| ビジネス / エンタープライズ | ～$299/月から | 300 万以上のクレジット、より多くの同時実行性 |
ScraperAPI は、 約 5,000 クレジットの約 1 週間の無料トライアル、一部のプランでは少額の継続的な無料枠が維持されます。セレクターを検証し、ターゲット ページが実際に消費するクレジット数を測定するには、これで十分です (人々を驚かせるのは、JS レンダリングの乗数です)。小規模な定期的なジョブの場合、単一の安価なプロキシと独自のフェッチ ループを使用すると、有料プランを下回る可能性があります。
1. でサインアップしてください スクレイペラピ.com メールを確認してください。
2. あなたの APIキー ダッシュボードに表示されます。
3. として渡します api_key 各リクエストのクエリパラメータ。
4. 追加 render=true 本当に JavaScript が必要な場合にのみ使用してください (より多くのクレジットがかかります)。
1 ページをスクレイピング:
ScraperAPI と競合するのは ブライトデータ (より大規模な住宅ネットワーク、より高価)、および次のような LLM に重点を置いたツールを使用 ファイアクロール 生の HTML ではなくクリーンなマークダウンを返します。必要なだけなら 検索結果 任意のページではなく、 SerpAPI または ブレイブサーチ よりシンプルで、多くの場合安価です。必要な場合は ScraperAPI を選択してください 任意のサイト上のアンチボット プロキシ マッスル ただし、HTML を自分で解析したいと考えています。 RAG パイプラインにフィードを供給しますか?スクレイピングとペアリングする 松ぼっくり そしてLLMのような OpenAI.
はい。約 1 週間、約 5,000 API クレジットの無料トライアルが可能です。一部のプランでは少額の継続手当が付いています。その後、毎月のクレジット プランを選択します。
scraperapi.com にサインアップしてメールを確認すると、ダッシュボードにキーが表示されます。すべてのリクエストで api_key クエリ パラメーターとして送信します。
基本リクエストは1クレジットです。 JavaScript レンダリング、プレミアム/住宅プロキシ、ジオターゲティングのコストは高くなります (多くの場合、それぞれ 10 ～ 25 クレジット)。ヘッドラインのクレジット数ではなく、実際のリクエスト タイプの組み合わせを使用して見積もってください。
ScraperAPI は生の HTML を返し、プロキシを使用した一般的なスクレイピング用に構築されています。 Firecrawl は、LLM および RAG 用に構築されたクリーンなマークダウンを返します。自分で HTML を解析する場合は、ScraperAPI を使用します。クリーナーを作成せずに LLM 対応のテキストが必要な場合は、Firecrawl を使用してください。
ScraperAPIとは無関係です。価格は参考見積りです。必ず公式の価格ページでご確認ください。