高级大数据开发工程师

职位描述： 1、负责大数据平台的开发和治理，包括数据采集、存储、处理、计算和展示等全生命周期的工作； 2、负责数据仓库和数据湖的设计和实现，提供高效、可靠、安全、可扩展的数据存储和计算能力； 3、熟悉数据架构、数据模型、数据质量和数据安全等方面的知识，能够设计和优化数据模型、ETL流程和数据治理流程； 4、熟练掌握Hadoop、Spark、Flink、Hive、HBase等大数据技术和工具，能够根据业务需求选择并使用适当的技术； 5、熟悉数据可视化和报表工具，如Tableau、PowerBI、FineBI等，能够根据开源报表系统定制化开发报表 6、关注最新的大数据技术和行业发展趋势，参与技术选型和架构设计，推动大数据平台的技术创新和业务应用。 职位要求： 1、本科及以上学历，计算机、数学或相关专业优先； 2、3年及以上大数据开发和治理经验，有数据仓库、数据湖、数据可视化等相关项目经验优先； 3、熟悉Hadoop、Spark、Flink、Hive、HBase等大数据技术和工具，能够熟练编写和调试相应的程序； 4、熟练掌握java、Scala编程语言，熟练使用springboot等开发框架，有良好的编码习惯和代码质量意识； 5、了解Linux操作系统和Shell编程，能够独立完成服务器配置和维护等相关工作； 6、具备良好的沟通和团队协作能力，能够与业务人员、数据分析师和其他开发人员协作完成项目任务； 7、具备较强的学习能力和自我驱动能力，能够快速学习新的技术和工具，主动推动工作的进展和改进。 8、有商业化开发经验优先