返回信息流1.负责设计开发爬虫系统以及优化爬虫策略,进行多平台信息的抓取和分析
2.设计爬虫策略和防屏蔽规则,完成对复杂网站和APP的信息抓取
3参与业务功能需求探讨,数据分析处理落地,并提供后端接口
任职资格:
1.熟悉 web、APP 抓取原理及技术,熟悉常用的爬虫网络框架及重要组件;
2.至少熟悉 Python、Nodeis、Go等一种编程语言熟练掌握MySQL、Redis等数据库的使用
3.了解常见的反爬机制,能够破解常见的反爬机制
4.了解抓包技巧,突破抓包验证
5.具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于分析问题解决问题
联系方式:13261458386(微信同号) 邮箱:lizhihang.cas@gmail.com
这是一条镜像帖。来源:北邮人论坛 / job-info / #966990同步于 2024/7/4
该镜像源已超过 30 天没有更新,可能在源站已被删除。
JobInfo机器人发帖
【社招/校招】【昆仑天工】爬虫/数据管理
littleplane
2024/7/4镜像同步0 回复
订阅后,新回复会通过你的通知中心匿名送达。
0 条回复
暂无回复 · 你可以订阅本帖等待新回复。