资深大数据工程师

岗位职责:1、参与公司数据平台架构设计，负责大数据平台和数据仓库相关建设；2、依据公司的大数据技术发展路线，负责基于Hadoop生态系统和MPP数据库的大规模数据平台的研发及数据仓库建设，提供可靠的数据存储和访问能力；3、负责公司大数据平台和数据仓库的搭建、开发、管理、监控和性能调优，保证集群高效稳定运行；4、规划与开发离线数据平台系统，处理海量数据，优化存储和计算架构的性能；5、负责数据平台技术难点攻关、技术选型评估，参与开发流程的讨论与优化；6、参与公司数据治理策略等的制订和实施；7、负责协助产品经理进行数据仓库相关的需求分析、建模、宽表设计等工作；8、负责系统核心代码编写、代码审核和重构，指导和培训数据工程师、不断进行系统优化；任职要求:1、本科以上学历，5年以上大数据研发经验，带领过10人以上的大数据团队； 2、有大型分布式系统设计经验，负责过海量数据平台上高可用、高性能分布式系统的架构设计；3、熟悉大数据开发框架，熟悉hadoop,hbase,spark等及业界主流流处理平台如，如storm,flunk,sparkstreaming等之一；4、熟悉Greenplum等数据仓库技术，并有广泛的实践经验，具备维护和解决生产问题的能力；5、熟悉掌握分布式存储和NoSQL数据库技术（如MonogoDB、Redis等），有实际生产项目应用经验；6、熟练掌握java，python，scalar中的至少一种编程语言，掌握常见的数据结构，算法，了解软件工程、敏捷开发等知识，熟悉常用设计模式7、理解SOA，微服务，中间件等PAAS相关的关键理念与技术，并对其有广泛的实践与应用经验，乐于分享。8、有民航、电子商务、风控等大数据设计和从业经验者优先。