职位&公司对比
职位详情
- 合肥
- 1年以内
- 本科
- Python
任职要求： 1、统招本科及以上学历，计算机、电子信息、软件工程等相关专业； 2、熟练掌握Python编程语言，具备扎实的编程基础，熟悉正则表达式、XPABOSS直聘TH、requests等技术； 3、熟悉Web前端技术，包括HTML、HTTP、JavaScript、JSON等，能够处理动态网页数据； 4、掌握常用数据库操作，mongodb，mysql等 5、了解Linux开发环境，掌握基本shell命令，具备linux部署的能力； 6、有爬虫类项目经验优先，熟悉常用的爬虫框架（如Scrapy来自BOSS直聘、自动化等）； 7、具备网络资源搜集、信息抽取、文本分类等相关经验者优先； 8、具备良好的沟通能力和团队协作精神，能够独立解决问题并承担工作压力。 岗位职责： 1、负责网络资源的搜集、抽取、清洗、去重、分类及过滤，构建高质量来自BOSS直聘的数据资源库； 2、根据业务需求，设计并实现高效的数BOSS直聘据采集方案，确保数据的实时性和准确性； 3、协助业务部门进行数据的更新与维护，提供数据支持及解决方案； 4、优化采集脚本，提升数据采集效率，解决采集过程中的反爬虫策略问题； 5、参与数据采集工具的开发以及成品数据集的制作。
职位详情
- 合肥
- 不限
- 本科
- Python
- Kafka
- Redis
- 爬虫经验
- 数据抓取
岗位职责： 1、参与分布式爬虫和数据采集系统的架构设计和研发； 2、负责日常网络数据获取需求的实现及采集数据的质量监控； 3、负责内部系统相关组件的研发和维护； 4、部门其它相关技术类工作； 任职要求： 1、计算机相关专业，本科或以上学历； 2、熟悉Python、网络爬虫原理和策略； 3、熟练掌握网页开发相关技术，了解DOM，来自BOSS直聘熟悉JS，HTTP协议，SSL，正则表达式，多线程等； 4、熟悉使用MySQL、MSSQL中的一种BOSS直聘，熟练使用SQL语言； 5、熟悉使用Red来自BOSS直聘is、MongoDB等，对Kafka、RabkanzhunbitMQ等消息队列有一定了解； 6、具备良好的表达和沟通能力，积极主动，富有工作热情及责任感； 7、有2年及以上相关研发经验优先。
技能解析
- XPATH
- 电子信息
- 团队协作精
- 编程语言
- 沟通能力和
- 软件工程
- HTML
- JSON
- 独立解决
- 协作精神
- 数据库操作
- 团队协作
- 编程基础
- 沟通能力和团队协作精神
- 常用数据库
- 提供数据支持
- 解决问题
- 数据支持
- 前端技术
- 解决方案
- 团队协作精神
- 好的沟通
- 独立解决问题
- 开发环境
- 沟通能力
- 数据采集
数据来自CSL职业科学研究室
技能解析
- 质量监控
- 使用SQL
- SQL语言
- HTTP协议
- 架构设计
- 良好的表达
- MSSQL
- 开发相关
- 消息队列
- 研发经验
- 设计和研发
- 沟通能力
- 数据采集
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 交通补助
- 生日福利
- 节日福利
- 通讯补贴
- 免费班车
- 零食下午茶
- 餐补
- 员工旅游
- 带薪年假
- 夜班补助
- 绩效奖金
- 年终奖
- 定期体检
- 补充医疗保险
- 五险一金
- 食堂
公司福利
- 五险一金
- 定期体检
- 年终奖
- 股票期权
- 带薪年假
- 餐补
- 节日福利
- 零食下午茶
电子营业执照
京公网安备11010502032801