数据开发工作内容

岗位职责： 1、参与大数据平台、知识图谱等项目落地过程中的数据治理、数据清洗、数据准备、提升数据质量等开发工作，包括参与数据链路架构、数据存储、数据计算、数据工具的完善和优化工作，解决计算中性能和功能等多方面的各种挑战（例如ETL的性能优化）；以及负责海量数据接入采集、数据质量、数据规范、数据监控、数据降本增效等工作。 2、负责知识图谱构建中实体和关系的识别、抽取、对齐等开发工作，将业务数据转化为易用的数据资产。 3、为项目提供大数据分析任务的方案设计及文档编写的工作。 4、与建模人员及应用开发人员协作，支撑数据分析、挖掘工作对于基础数据的加工。将数据分析及开发结果应用到相关业务场景。 5、为团队分享相关技术知识，带领团队提升整体技术水平。 任职要求： 1、 计算机相关专业，全日制本科及以上学历，3年以上大数据分析开发经验。 2、 熟练掌握SQL、pyspark开发语言，了解Scala或Java语言；懂得SQL优化，掌握窗口函数、explode等函数运用； 3、 熟悉linux开发环境，能够熟练的编写复杂shell脚本，有扎实的开发功底。 4、 熟悉Spark、SparkSQL、MapReduce，了解ETL性能优化；熟悉大数据Hadoop生态系统，熟练使用主流大数据平台进行数据的处理，具备其中一种或多种产品(Spark、Hive、Hbase、Kafka、ES等)使用经验。 5、 熟悉离线数仓的建设，了解数仓维度建模、分层等知识，了解数据治理方面的知识，知道如何保障数据质量。 6、 有浓厚的学习兴趣和钻研精神，对数据敏感，具备良好的沟通能力，有较强的责任感和团队协作意识。 7、 能够积极主动学习，并乐意为团队进行技术分享。 8、 熟悉知识图谱概念和相关技术，有过实际知识图谱或者图数据库开发经验者优先，有银行或金融数据开发经验有先。 9、 如有工作需要，可接受一段时间的出差。

1、本科以上学历，软件工程/计算机/通信/数学等相关专业； 2、熟悉Hive SQL语言，熟悉shell/python等至少一种脚本语言； 3、熟练使用 java/scala 至少一种开发语言, 在 flink 或 spark streaming 等开发平台上有较好的开发经验; 4、熟悉 springboot/spring mvc 等 java web 框架者优先; 5、有数据仓库建设、用户画像、用户行为分析、商业数据分析、增长项目经验者优先; 6、理解能力强，善于沟通，有责任心和团队精神；

【业务介绍】 我们在东南亚新加坡、印尼、菲律宾拥有完整的银行牌照，我们的数字银行业务在印尼、菲律宾已经上线运行并拥有可观的用户和业务量，在新加坡我们也在逐渐开发完整的银行服务。数字银行作为东南亚新兴的产业，有着广阔的业务前景。 银行是一个基于风险控制的行业，商务模式以数据为基础。除此之外，银行行业的特性也决定了其监管报表的重要性超乎常规行业。在银行行业，数据的重要性和复杂度是一个非常有意义的挑战。 【岗位职责】 1、负责银行数据仓库的系统建设和金融业务的数据建模； 2、负责数据报表开发，包括数据维度、指标计算、作业管理和质量监控； 3、负责搭建数据治理体系和推进相关工具的落地，包括但不限于数据血缘关系管理，作业依赖关系解析，SQL性能分析等； 【岗位要求】 1、熟悉大数据计算平台架构，掌握Hadoop、HBase、Flink、Spark、Kafka等大数据开发工具中一种或几种； 2、有良好的业务理解和数据洞察能力，熟悉银行业务数据分析和模型者优先；

根据公司年终奖制度执行

岗位职责： 1，负责大数据应用类系统的设计和开发，以及关键技术的攻克，如DMP、推荐、用户画像、OLAP系统、数据治理等等； 2，协同产品、算法，设计实现基于业务、产品和技术的数据应用领域解决方案； 3，参与内外部的业务需求分析，推动数据资产和数据可视化建设及优化； 4，参与企业级大数据平台建设及环境整体搭建，实现从数据采集、清洗、加工、汇聚到全链路数据分析应用的全方案落地； 任职要求： 1，计算机相关专业本科及以上学历，3年以上大数据开发及分析相关工作经验； 2，精通Linux，掌握Java或Python至少一种语言，熟练编写SQL脚本并具备一定的SQL性能调优经验； 3，熟练掌握Hadoop、Hive、HBase、Spark、Kafka、ES、Flink等大数据技术； 4，熟悉大数据技术架构及大数据项目的开发流程，对于数据质量、元数据管理、数据安全管理有一定实践经验； 5，熟悉ETL、BI、数据分析方法、数据挖掘经验者优先；

岗位职责: 1） 负责数据中台的数据模型设计，各业务主题的数据模型设计、指标整理、数据库ER建模、维度建模和业务分析专题建模； 2） 负责大数据模型的标准制定、实施、监督工作； 3） 负责数据中台的数据模型管理工作（建模，设计，实施）； 4） 负责数据中台的数据质量管理工作； 岗位要求: 1）硕士及以上学历，计算机相关专业，3以上相关工作经验； 2）熟悉大数据分布式平台技术，包括hadoop、spark、hive等； 3）有丰富的数据建模经验，能指导团队成员进行数据建模； 4）熟悉多种关系型数据库系统，熟练使用数据库产品； 5）熟悉数据库基本概念、原理和技术；熟练编写SQL语句、SQL优化； 熟练使用Python、JAVA等高级语言； 6）有效沟通能力强，充满正能量，有带领团队开发能力，思路清晰，解决问题能力强； 7）具有智慧园区、智慧城市、未来社区项目数据仓库/集市、ETL工作经历优先。

岗位职责： 1、分析业务需求，建设数据库仓库，对业务部门提供数据支持； 2、参与数据源分析，完成大数据平台与各业务系统的数据对接； 3、完成基于大数据技术平台基础上的数据仓库设计和ETL开发； 4、调研相关技术，优化大数据开发流程，规划大数据平台应用。 任职标准： 1、3年以上数据仓库相关工作经验, 有互联网、电商行业数据仓库建设经验； 2、精通Hive-sql编写和优化，精通常用etl工具，至少熟悉java、python、shell等语言中一种； 3、精通大数据背景下数据仓库模型设计，熟练掌握OLAP的维度建模设计方法； 4、有数据平台（数据开发、治理、资产等）相关建设经验； 5、责任心强，有较强沟通能力和团队合作精神； 6、有spark streaming、flink等实时数据开发经验； 7、有统计学数学知识，海量数据处理、数据分析和挖掘经验者优先

1、全日制211本科及以上学历3年以上大型数据仓库相关工作经验，熟悉数仓模型分层设计及ETL处理。 2、熟练堂握SQL语言，深入了解至少一种关系数据库系统，精通 MySQL、TiDB、mongodb者优先; 3、熟悉数据仓库理论，熟悉数仓、集市模型，了解数据管理相关知识如数据质量管理元数据管理 4、熟悉分布式数据平台、大数据生态，熟练使用Spark、Flink. HBase、Kafka等，并了解其基本原理者优先; 5、优秀的表达能力，熟悉金融业务，有金融行业经验背号者优先;有客户关系管理领域业务分析经验优先; 6、对数据敏感、对技术敏感，有研究的意识和直觉者更佳。