成功案例
您现在的位置是: 首页->成功案例

公司名称 :
某互联网教育公司
职位编号 : WGS0527
招聘职位 : Java数据挖掘工程师(爬虫方向)
薪金待遇 :
年薪30万 
招聘人数 :
工作地区 :
深圳 

成功推荐录用人数:1 人

第一批候选人推荐时间:5

共推荐人选:3

项目完成周期:31

岗位职责:
1、负责设计、开发、维护大数据分析处理相关的软件产品和模块,开发主要使用语言为JAVA
2、搭建数据采集平台(大型C2C类,B2C类网站),建立爬虫系统,通过对数据的抓取、解析、调度、存储等模块的拆分与优化,构建和完善统一的抓取服务平台;
3、负责重点目标站点的结构与URL特点分析,负责垂直领域与定向网站的数据采集、维护及数据异常的跟踪处理,为品牌提供竞品市场分析等数据支撑;
4、参与大数据后台设计、负责大数据后台编码实现,负责爬虫技术设计实现。
5、拥有分布式爬虫、垂直网站抓取经验优先。
任职要求:
1、二年以上Java开发经验,熟悉windows与linux开发环境,有大型C2C,B2C电商网站爬虫实践经验者优先;
2、熟悉多线程网页抓取原理及技术,熟悉基于Cookie的网站登录原理,精通正则表达式能够从Xpath、CSS等网页信息抽取技术;
3、具备信息检索、自然语言处理、web挖掘等搜索引擎相关知识,有从事海量网络爬虫、网页去重、网页信息抽取的开发经验;
4、精通html语言,熟悉Lucene/Nutch/Heritrix/larbin/jsoup(熟悉使用者优先)等开源工具;
5、熟悉sql语句、有mysql、oracle等主流数据库使用经验;
6、有一定的架构设计能力,有很强的分析、解决问题的能力。
7、工作态度踏实、认真、积极主动,能承受一定工作压力,有责任心、有团队协作能力。
8、响应抓取需求,能快速高效的完成开发任务,具备良好的沟通能力和管理能力。

 
 
返 回
 

Copyright  2007-2013 引领者企业管理All Rights Reserved 版权所有 深圳总部地址:深圳市罗湖区宝安南路3097号洪涛大厦810室 信息产业部备案:粤ICP备13055190号-1

技术支持:出格
点击这里给我发消息