职位&公司对比

职位详情

• 深圳
• 1-3年
• 本科

• 爬虫架构
• Python
• 数据采集

岗位职责： 1、负责搭建和维护现有爬虫系统； 2、负责数据的抓取、解析、清洗、入库、实时监控更新； 3、持续优化系统提高系统的稳定、高效性； 4、与业务部门和上级沟通boss确保数据的高效及时性； 5、与其它各部门对接，来自BOSS直聘确保数据的完整准确性； 岗位要求：  1、全日制统招本科及以上学历理工科相关专业；  2、2年以上python使用经验，熟悉常用python库的使用，熟悉面向对象编程，且熟练使用scrapy框架、django框架、熟悉Selenium、来自BOSS直聘有kanzhunscrapy-redis使用经验者优先考虑: 3、熟悉常见反爬技术，能处理各种反爬问题者优先；  4、掌握正则表达式、xpath、beautifulsoup4、css选择器等信息抽取技术;  5、 掌握Linux基本操作，能够编写shell脚本优先，能独立解决简单常见的问BOSS直聘题；  6、熟悉MYSQL、Redis等数据库操作能进行简单的数据库优化；  可关注微信公众号“原点参数”，了解更多详情。