WebScraping.ai 提供網頁抓取 API 服務,您可以透過添加代理參數,讓抓取請求經過您的代理 IP 發出。請按照以下步驟完成代理設定
在配置代理之前,您需要取得代理憑證。點擊此處了解如何取得代理憑證
前往 WebScraping.aiarrow-up-right 官網註冊或登入帳戶。
在控制面板中找到您的 API 金鑰。
WebScraping.ai 的 API 支援透過 custom_proxy 參數指定代理。請求格式如下:
custom_proxy
curl "https://api.webscraping.ai/html?url=https://target-website.com&api_key=YOUR_API_KEY&custom_proxy=protocol://username:password@host:port"
url: 要抓取的目標網站地址。
url
api_key: 您在步驟 1 取得的 API 金鑰。
api_key
custom_proxy: 您的代理資訊,格式為protocol://username:password@host:port
protocol://username:password@host:port
將你的真實憑證填入步驟 2 建構的命令中,執行命令後,WebScraping.aiarrow-up-right 會回傳抓取到的頁面內容。由於目標 URL 是 ipinfo.io/json,返回的 JSON 資料中應包含 IP 訊息
最后更新于15天前