BOSS直聘采集遇到安全验证怎么办
职位采集应基于获授权的数据源,遇到验证码暂停任务并正常验证,登录成功不代表获得批量采集授权。
要点
- 先区分公开职位与登录后数据,以及验证码、403、页面跳转等不同问题,不能套用同一种处理办法。
- 第三方教程或项目不能证明当前仍可用,也不能证明平台允许采集,不宜直接照搬验证码绕过、代理轮换或 Cookie 复用。
- 采集与 Agent 分离:获授权数据源提供职位,经清洗去重后交给 Agent 按方向筛选,再推送职位摘要与原链接。
- 仅保留必要职位字段,不采集求职者简历、联系方式等个人信息;排查验证提示时,截图或文字应隐去手机号、Cookie 和 token。