• 外包信息请发到 /go/outsourcing 节点。
• 不要把相同的信息发到不同的节点
kenwell
V2EX  ›  酷工作

[爱奇艺]招聘喜欢 Hbase 和大数据爬虫 Java 工程师

  •  
  •   kenwell · Nov 6, 2015 · 3112 views
    This topic created in 3868 days ago, the information mentioned may be changed or developed.
    1. 喜欢技术,喜欢折腾,喜欢处理线上的性能和高并发问题。
    2. 我们自己折腾基于 Protobuf 的 Rpc ,基于 Zookeeper 的分布式系统,需要 Geek 的小伙伴加入。我们也在用 Thrfit
    3. 我们搞大数据, Hadoop 、 Hbase 、 Couchbase 、 Redis
    4. 我们用 Docker
    5.只要觉得牛,薪水都好说。

    职位描述:
    * 负责搜索后端大数据流程处理、爬虫系统开发、加快数据上线和下线速度
    * 搭建公司平台级别爬虫系统、解决爬虫性能、提高数据爬取速度
    * 我们后台数据存储使用 Hbase ,任务处理用 Hadoop
    * 我们使用 Docker 搭建了内部开发的分布式爬虫系统

    职位要求:
    精通 Java 和面向对象编程,熟悉设计模式
    熟悉 shell 编程,以及 python 、 ruby 、 groovy (至少一种)等脚本编程
    良好的 code style 及编程习惯
    熟练使用 Java 各种开源项目( Spring 、 Guava 、 Apache Commons )等
    熟练使用各种开发工具( SVN 、 IDEA 、 Maven )
    精通 spring 及其生态链加分
    懂 Data pipeline 加分
    懂 hadoop hbase 加分
    三年以上工作经验。


    职位的挑战:大数据、解决搜索的死链、解决大数据时后台数据的处理能力
    只要有能力,这里肯定提供平台。

    工作地点:北京
    薪水: 20k*14 以上
    联系方式: wuguilin # qiyi.com
    6 replies    2015-11-24 14:54:42 +08:00
    qw7692336
        1
    qw7692336  
       Nov 6, 2015 via Android
    spring
    qw7692336
        2
    qw7692336  
       Nov 6, 2015 via Android   ❤️ 1
    好讨厌 spring
    kenwell
        3
    kenwell  
    OP
       Nov 6, 2015
    @qw7692336 没关系,我们这也在使用 groovy , spring 只是个工具而已,主要是你喜欢分布式系统。欢迎加入我们
    kenwell
        4
    kenwell  
    OP
       Nov 17, 2015
    继续招人,接触大数据和大系统的机会
    kenwell
        5
    kenwell  
    OP
       Nov 23, 2015
    继续招人,欢迎喜欢架构和大数据的同学加入
    kenwell
        6
    kenwell  
    OP
       Nov 24, 2015
    有兴趣的欢迎投简历
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1478 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 16:48 · PVG 00:48 · LAX 09:48 · JFK 12:48
    ♥ Do have faith in what you're doing.