职位&公司对比
职位详情
- 北京
- 3-5年
- 本科
- 移动端爬虫
岗位职责: 1.负责Web/APP多端爬虫的开发,解决加密参数算法还原、风控等难点; 2.研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性; boss3.直聘独立解决实际开发过程中碰到的各类产品数据需求和接口问题。 职位描述 1.负责Web/APP多端爬虫的开发,解决加密参数算法还原、风控等难点; 2.研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性; 3.独立解决实际开发过程中碰到的各类产品数据需求和接口问题。 职位要求 1.本科及以上学历,计算机或相关专业,3年以上移动端工作经验; 2.了解Android或iOS系统底层原理及机制,熟悉汇编语言和加解密算法; 3.对App进行分析、调试、加固、混淆等比较熟悉;有ollvm、unicorn开发经验优先; 4.能够熟练掌握IDA、JEB等分析调试BOSS直聘工具;了解注入、Hook技术原理,能使用Frida、Xposed等框架编写Hook代码; 5.熟悉反跟踪调试技术、企业脱壳技术; 6kanzhun.有较强的学习和创新能力,有好奇心和热情做深入研究,具有良好的团队协作与沟通能来自BOSS直聘力。
职位详情
- 北京
- 3-5年
- 本科
- 视频/图片
- akamai
- jsvmp
- 瑞数
- 指纹浏览器
- 群控
职位描述 根据业务需求,设计和实现高效、稳定的爬虫系统,收集互联网数据。 研究各类反爬机制来自BOSS直聘,设计和实现有效的反反爬策略,确保爬虫系统的稳定运行。 设计和优化数据存储方案,确保数据的高效存储和快速访问。 实时监控爬虫系统运行状态,及时发现并解决问题,保障系统的高可用性。 职位要求 计算机科学、软件工程或相关专业本科及以上学历。 5年以上爬虫开发经验,至少2年视频数据爬取经验。 熟练掌握Python,熟练使用Scrapy、BeautifulSBOSS直聘oup、Selenium等爬虫框架。 具备视频数据处理经验,熟悉FFmpeg等视频处理工具,掌握视频去水印技术。 深入理解各类反爬机制,具备丰富的反反爬经验。 熟悉常见的数据存储和处理技术,如MySQL、MongoDB、Elasticsearch等。 具备大规模分布式爬虫系统设计与实现经验。 优秀的分析和问题来自BOSS直聘解决能力,良好的沟通和团队协作能力。 加分项 具备大型分布式爬虫系统的设计和开发经验。 熟悉机器学习和数据挖掘技术,有相关项目经验。 有大规模视频数据处理和分析经验。
技能解析
- 协作与沟通
- 技术原理
- 汇编语言
- 学习和创新
- 可扩展性
- 良好的团队协
- 开发过程
- 较强的学习
- 创新能力
- 独立解决
- 沟通能力
- 调试工具
- 调试技术
- 团队协作
- 开发经验
数据来自CSL职业科学研究室
技能解析
- 问题解决能力
- 数据处理和分析
- 解决问题
- 数据处理经验
- 软件工程
- 系统的设计
- 问题解决
- 数据存储
- 协作能力
- 及时发现
- 优秀的分析
- 机器学习
- 团队协作能力
- 高可用性
- 系统设计
- 好的沟通
- 熟悉机器学习
- 分析经验
- 数据处理
- 解决能力
- 数据挖掘
- 团队协作
- 开发经验
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 五险一金
- 定期体检
- 年终奖
- 带薪年假
- 免费班车
- 节日福利
公司福利
- 交通补助
- 免费工装
- 团建聚餐
- 零食下午茶
- 餐补
- 带薪年假
- 股票期权
- 年终奖
- 意外险
- 补充医疗保险
- 五险一金