- 审核数据平台项目总体技术方案，对各项目进行质量评估； - 参与应用分析系统的系统分析、设计以及实施工作; - 负责分析数据采集需求，全局设计数据处理的技术流程和规范； - 负责设计改良数据质量, 根据实际情况解决核心数据质量问题； - 研究与跟踪大数据新技术发展方向，主持制定大数据平台技术发展战略规划； - 负责大数据部门的技术研究、技术知识培训 要求： 拥有5年以上Hadoop开发设计和实施经验，有分布式系统架构设计的经验，有Hadoop系统架构设计经验，至少1个以上大型成熟项目的经验； 2. 对Hadoop相关的技术和组件（HDFS，MR，Hase，Hive，Spark，Storm等）有全面深入了解，能够熟练安装、配置、部署和优化大型Hadoop集群系统。 3. 具有大数据处理实战经验，熟悉整个大数据的完整处理流程，包括数据的采集、清洗、预处理、存储、分析挖掘和数据可视化。 4. 熟悉互联网常见的业务模式和用户行为分析模型，熟悉常用的数据挖掘技术和算法，如路径分析、关联规则挖掘、分类、聚类分类、协同过滤等.