职位&公司对比

职位详情

• 杭州
• 不限
• 大专

• 爬取

岗位职责BOSS直聘： 1、负责多跨境电商平台信息抽取、去重、分类、解析、增量（如：amazon、walmar直聘t、wayfair等）； 2、根据网站的反爬虫措施设计合理的抓取逻BOSS直聘辑，保证网页抓取的效率和质量； 3、开发Python脚本，提升业务工作效率； 【加分项】不要求全部掌握，掌握越多越加分 1、懂JS逆向，基本不使用seleinum进行爬虫 2、懂得分析网络请求，尤其是ajax请求 3、字符验证码、滑块验证码的破解经验 4、分布式爬虫的原理 5、模拟登录的原理 6、Pyqt5开发 7、kanzhun有日抓取百万数据（按请求数计）项目经验 8、熟悉scrapy框架 9、了解协程、多线程 任职要求： 1、熟悉Python语言，基础的Python语法要熟练掌握 2、熟悉正则/Xpath 2、主流数据库增删改查的熟练掌握（例：,mysql,redis等） 3、统招本科及以上学历，计算机相关专业，1-3年电商公司相关工作经验，业务场景应用中有爬虫、反爬虫工作经验或大数据+电商平台爬取数据分析经验者优先BOSS直聘考虑；