chatgpt-scraper

⚠ 该项目 README 未提供完整安装说明，以下步骤为通用流程，请以官方文档为准。

环境要求

• Python 环境（README 示例代码为 Python）
• 已安装 requests 库
• 有效的 Oxylabs Web Scraper API 凭证（用户名 + 密码）
• 可访问 data.oxylabs.io 的网络环境

安装与启动步骤

1. 1注册并获取凭证

   在 Oxylabs Dashboard 注册账号，开通 Web Scraper API 免费试用，取得用于认证的用户名和密码。

2. 2编写请求脚本

   按 README 示例构造 payload（source 为 chatgpt），向 API 地址发起 POST 请求，把 auth 换成自己的凭证。

   import requests
   from pprint import pprint
   
   payload = {
       'source': 'chatgpt',
       'prompt': 'best supplements for better sleep',
       'parse': True,
       'geo_location': "United States",
       'callback_url': "https://your-server.com/oxylabs-callback"
   }
   
   response = requests.request(
       'POST',
       'https://data.oxylabs.io/v1/queries',
       auth=('USERNAME', 'PASSWORD'),
       json=payload,
   )
   
   pprint(response.json())

   复制

3. 3运行并查看结果

   执行脚本后，API 返回解析好的 JSON，包含对话回复与结构化元数据，无需自己管理代理和浏览器。

关键配置

如何确认成功

脚本成功打印出 JSON 响应，其中包含 ChatGPT 的对话回复内容和结构化元数据即表示调用成功。

常见问题

注意事项

• 示例中的 USERNAME、PASSWORD 必须替换为你自己的真实凭证，切勿把凭证提交到公开仓库。
• geo_location 与 callback_url 为可选项，不使用时可从 payload 中删除。
• README 未提供本地安装或 Docker 部署方式，本工具实质是通过 HTTP 请求调用 Oxylabs Web Scraper API。