大数据处理工程师

面议

上海市

刷新时间：2020-08-10

职位描述

岗位职责：
1.负责公司大数据平台的Hadoop技术栈研究，形成技术解决方案和整体的大数据架构。
2.负责Hadoop平台（分布式存储、分布式资源管理和调度、分布式计算等）的架构研究、测试、优化搭建工作；
3.负责探索, 研究新的 Hadoop 生态中技术引擎，不断扩充平台能力。
4.制定hadoop整体集群使用规范，规范的Hadoop日常维护、异常处理等工作，保障集群稳定、运行规范解决方案
5.负责公司定制项目的大数据架构的整体解决方案
6.负责各种行业大数据在不同应用场景的开发实践，提供流计算、批处理分析、数据挖掘、BI分析等技术解决方案

岗位要求：
1.三年以上hadoop集群架构开发或架构经验。
2.精通hadoop架构的设计以及生态，hadoop的集群的搭建、部署、开发和运维
3.精通hadoop各个模块的能力定位和配置，对HDFS、Hbase、MR、Spark等基本组件熟知
4.熟悉linux系统及调错经验，熟悉 jvm 运行机制，有 shell、python开发经验。
5.有钻研新技术的热情和能力，善于交流和表达，富有团队精神
6.有企业级大数据系统设计经验者优先。
7.有一定的代码经验，python/java/c++/Ruby 均可。
学历 大专 专业 不限
工作经验 3年以上

其他要求

招聘人数：1人
职能类别：数据采集/分析/开发

公司介绍

诗迈医药猎头是一家专业从事医药行业猎头服务的科技型企业，总部位于杭州，下属有上海、南京、广州、武汉等多家分公司，同时自主开发国内领先的猎头办公系统及医药人才网站，全面致力于海内外制药、生物、医疗、器械等行业线上线下人力资源整合。
公司与全国各地研发企业、生产企业及销售经营等企业及业内同行建立了良好互动平台，在欧、美、日等国家建立了海归引进平台，同时积极开展医药高等院校公益系列讲座，搭建了以人力、企业为主体的立体化咨询服务网，为医药企业人才队伍建设发挥了积极重要作用，为很多医药企业解决了高端人力之困。