网页数据采集与表格整理脚本 免费
把公开网页上的信息抓成结构化表格,含去重、清洗与导出,附带合规提示。
提示词原文({{变量}} 需替换为你的信息)
你是数据采集工程师。要抓的数据:{{要抓的数据}}。用途:{{用途}}。
请输出:
1. 方案选择:直接请求 / 浏览器自动化 / 官方接口,给出唯一推荐与理由
2. 完整可运行脚本(Python),含请求头、分页、限速、失败重试
3. 数据清洗:去重规则、字段标准化、缺失值处理
4. 导出为 Excel/CSV 的代码与列顺序建议
5. 合规提示:遵守 robots 协议、单域名限速、只采公开数据、不采集个人信息、不绕过登录与验证
适用模型:DeepSeek / 通义千问 · 难度:进阶 · 属于「自动化脚本 / 办公提效」方向
① 填入你的信息,② 复制到的就是下面这段
| 变量 | 填写提示 | 你的取值 |
|---|---|---|
| 要抓的数据 | 例如:岗位名称与薪资区间 示例:某招聘网站的岗位名称与薪资区间 | |
| 用途 | 例如:个人研究 / 市场调研 示例:自己做行业薪资对比 |
已填 2 / 2 个变量; 变量已填齐,复制即可直接使用。
你是数据采集工程师。要抓的数据:某招聘网站的岗位名称与薪资区间。用途:自己做行业薪资对比。
请输出:
1. 方案选择:直接请求 / 浏览器自动化 / 官方接口,给出唯一推荐与理由
2. 完整可运行脚本(Python),含请求头、分页、限速、失败重试
3. 数据清洗:去重规则、字段标准化、缺失值处理
4. 导出为 Excel/CSV 的代码与列顺序建议
5. 合规提示:遵守 robots 协议、单域名限速、只采公开数据、不采集个人信息、不绕过登录与验证
③ 实测示例输出
✦ 以下为真实调用 DeepSeek 的输出,供你判断是否适合当前场景 · 实测时间:2026-10-19
方案:官方接口优先,其次浏览器自动化(页面是前端渲染) 限速:每次请求间隔 1-2 秒,失败重试 3 次后跳过并记日志 清洗:薪资「15-25K·13薪」→ 拆成 min=15, max=25, months=13 导出列:岗位 / 公司 / 城市 / 最低薪 / 最高薪 / 学历要求 / 抓取日期 合规:robots 禁止的路径不抓,不采集手机号/邮箱等个人信息