WebScraping.AI

WebScraping.ai 提供網頁抓取 API 服務,您可以透過添加代理參數,讓抓取請求經過您的代理 IP 發出。請按照以下步驟完成代理設定

lightbulb-exclamation-on


1

獲取 WebScraping.ai API 金鑰

  1. 前往 WebScraping.aiarrow-up-right 官網註冊或登入帳戶。

  2. 在控制面板中找到您的 API 金鑰。

2

建構包含代理的 API 請求

WebScraping.ai 的 API 支援透過 custom_proxy 參數指定代理。請求格式如下:

curl "https://api.webscraping.ai/html?url=https://target-website.com&api_key=YOUR_API_KEY&custom_proxy=protocol://username:password@host:port"
chevron-right參數說明hashtag
  • url: 要抓取的目標網站地址。

  • api_key: 您在步驟 1 取得的 API 金鑰。

  • custom_proxy: 您的代理資訊,格式為protocol://username:password@host:port

3

驗證代理

將你的真實憑證填入步驟 2 建構的命令中,執行命令後,WebScraping.aiarrow-up-right 會回傳抓取到的頁面內容。由於目標 URL 是 ipinfo.io/json,返回的 JSON 資料中應包含 IP 訊息


最后更新于