nik
V2EX  ›  北京

[北京]招聘数据抓取工程师

  •  
  •   nik · Nov 16, 2016 · 2513 views
    This topic created in 3481 days ago, the information mentioned may be changed or developed.

    北京上市企业,需要 1 名数据抓取工程师

    岗位职责: 1.设计并搭建公司抓取平台; 2.根据网站结构设计抓取策略及规则; 3.对抓取数据进行清理和结构化处理;

    任职要求: 1.熟悉 Java 、 Python ,熟练掌握 MySQL/Oracle/Mongdb 等数据库的使用; 2.熟悉现有开源抓取框架,能够构建多线程、分布式的抓取系统,并具有实际抓取经验; 3.良好的沟通能力和团队合作能力,对工作有激情。

    这个岗位虽然以抓取为主,看工程师的能力,也可以涉及到数据处理和分析的工作,帮助工程师打通技术栈。

    联系邮箱 [email protected]

    2 replies    2016-11-18 23:24:38 +08:00
    chendajun
        1
    chendajun  
       Nov 17, 2016
    一直用 scrapy 抓数据。另外请大概说一下待遇情况
    nik
        2
    nik  
    OP
       Nov 18, 2016
    @chendajun 10~20k ,具体看能力
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2475 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 36ms · UTC 15:51 · PVG 23:51 · LAX 08:51 · JFK 11:51
    ♥ Do have faith in what you're doing.