职位&公司对比
职位详情
- 北京
- 1-3年
- 大专
- 数据抓取
- 网络爬虫
- 数据采集
采集软boss件来自BOSS直聘的BOSS直聘编写,采集,清洗,整理,储存。也可来自BOSS直聘灵活形kanzhun式合作。
职位详情
- 北京
- 3-5年
- 大专
- JS逆向
- selenium
- 爬虫工程师
- Python
【注意】本岗位要求机试考核通过后再约面试 岗位职责: 1.对指定的网站进行网页抓取、数据提取、破解反爬策略; 2.负责多平台信息抽取、数据清洗、入库、服务化等研发和优BOSS直聘化工作; 3.参与开发和设计分布式kanzhun网络爬虫系统,进行信息的抓取和分析工作; 4.研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性; 5.独立解决实际开发过程中碰到的各类产品数据需求和接口问题。 任职要求: 1.专科及以上学历,计算机相关专业,3年以上相关工作经验; 2.精通 Python 语言,精通常见开源爬虫框架; 3.精通 Charles等抓包工具,精通网页抓取原理及技术,精通正则表BOSS直聘达式,熟练从结构化和非结构化的数据中获取信息; 4.精通来自BOSS直聘 JS debugger、JS逆向; 5.精通 selenium 、DrissionPage 等自动化抓取技术; 6.熟悉 破解网站验证码、绕过机器人检测等技术; 7.熟悉 APP脱壳、APP逆向反编译; 8.具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于分析问题/解决kanzhun问题。 9.加分项: 1)熟悉 android & ios 自动化优先; 2)有浏览器插件采集数据经验者优先; 3) 熟悉 cloudFlare, cloudfront 等cdn安全防护产品 和 PerimeterX, Akamai, Incapsula 等web安全产品,有破解方案者优先。
技能解析
暂无识别出相关技能要求
技能解析
- 善于分析
- 考核通过
- 可扩展性
- 获取信息
- 解决问题
- 逻辑思维能力
- 开发过程
- 安全产品
- 数据清洗
- 安全防护
- 独立解决
- 分析问题
- 抓包工具
- 善于分析问题
- 逻辑思维
数据来自CSL职业科学研究室
工作时间
公司福利
- 加班补助
- 带薪年假
- 员工旅游
- 餐补
- 节日福利
- 工龄奖
- 底薪加提成
- 绩效奖金
- 定期体检
- 五险一金
- 培训计划