大数据实施工程师

【技能要求】 Hive，Spark，Shell，Hadoop，MySQL，ETL 【工作职责】 1. 参与/负责数据仓库/ETL（数据抽取、加载、清洗、转换）处理任务的设计和开发工作； 2. 参与/负责数据报表的设计和开发工作； 3. 参与/支持相关BI业务分析的开发和实施工作； 注：精通shell，有hadoop大数据环境经验,有使用一些组件的经验sqoop datax hive spark azkaban等。 【岗位要求】 1. 掌握数据库基本知识,对数据库内部结构有较深理解和认识； 2. 精通mysql数据库及mysql存储过程,具有数据模型设计的能力； 3. 精通sql语句编写,具有1年以上基于数据库开发的经验； 4. 具备数据挖掘,数据迁移,ETL处理,sql语句优化,海量数据处理的工作经验； 5. 熟悉Linux操作系统常用命令； 6. 工作严谨细致,有责任心,勤奋踏实,善于思考问题,具有团队合作精神，能承受一定的工作压力; 7. 精通hadoop及相关组件； 8. 有良好的人际关系和沟通能力，有大型项目经验优先。