
此信息由上海交通大学人才招聘网审核并发布(查看原发布网址),应届生求职网转载该信息只是出于传递更多就业招聘信息,促进大学生就业的目的。如您对此转载信息有疑义,请与原信息发布者上海交通大学人才招聘网核实,并请同时联系本站处理该转载信息。
招聘岗位:项目助理 | |
招聘人数:1 名 | |
聘用方式 | |
项目聘用A | |
招聘条件 | |
大学本科(简称“大学”)及以上学历,学士及以上学位 一年以上工作经验; 精通python开发,熟悉使用scrapy、selenuim等常用开源爬虫框架; 熟悉HTTP协议、HTML、DOM,并有一定的JavaScript能力; 熟练使用Xpath、正则表达式或Beautiful Soup任一种解析框架; 有丰富的应对反爬虫的经验,例如合理使用IP 池、验证码识别技术等; 熟练使用splash、浏览器内核等工具解析动态页面; 熟悉多线程、网络编程以及分布式爬虫架构开发场景 熟悉使用Redis和任意一种常见的分布式消息队列; 熟练使用模拟登陆、UA池、动态代理、IP池等常规伪装手段; 熟悉常规反爬虫手段以及常见的解决方案,有一定的逆向工程能力; 熟练使用Mysql,熟悉Nosql数据库等,有大数据开发相关经验更佳; 熟悉Ubuntu等Linux系统,熟练使用shell工具; |
|
岗位职责 | |
管理建设数据获取、爬虫平台框架,负责爬虫系统规划以及相应架构设计; 负责设计和开发网络爬虫应用,包括调度、抓取、入库等内容; 负责现有爬虫核心算法和策略优化; 网络爬虫架构设计、功能开发及优化; 参与建设平台治理统一的数据体系,能独立完成项目的系统分析,根据开发规范和数据模型设计实现数据开发任务,保证数据质量; 参与数据仓库的设计和研发,进行海量数据模型设计、数据ETL开发; 参与数据产品及应用的数据研发,发觉数据业务价值,助力数据化运营业务。 |
|
岗位待遇 | |
面议 |
|
其他 | |
应聘人请在9月1日之前完成系统中应聘(请确保接收邮箱填写正确),同时将个人简历发至以下联系人邮箱(姓名+广告名称)。 | |
联系方式 | |
联系人:贾雨葶 TEL:; E-mail:acemap@ 联系地址:上海市闵行区东川路800号上海交通大学电信群楼1-432 |