我们的客户是一家公用事业公司,他们急需一名数据工程师与数据分析师合作,进行数据准备、清洗,构建优化的数据模型,并在Power BI中进行可视化。
工作职责:
- 优化、增强和支持基于Microsoft Azure的云数据平台
- 参与与外部供应商的云数据平台增强项目生命周期,包括设计、开发、测试、部署和文档编制
- 与数据分析师合作,进行数据准备、清洗,构建优化的数据模型,并在Power BI中进行可视化
- 进行云数据产品的概念验证
职位要求:
- 大学本科及以上学历,主修IT、计算机科学、数据科学或其他相关专业
- 6年与数据平台相关的工作经验
- 具备Python和SQL的经验(具有Spark、Azure Data Factory、Event Hub / Kafka / Event Messaging、Azure Data Lake Storage Gen2、Databricks、Unity Catalog、Power BI Purview的实际经验者优先考虑)
- 具备数据与分析多租户的知识
- 具备租户成本分离设计的知识(工作空间和数据授权)
- 具备Data Lakehouse平台架构的知识
- 具备ETL、数据流式处理、数据管道、数据模型实施和数据可视化的知识
- 具备DataOps、MLOps、AIOps、ModelOps和FinOps的知识
- 具备软件开发生命周期(SDLC)的经验
- 具备责任心强、积极主动、承诺、分析和解决问题的能力强、良好的人际沟通能力、团队合作精神
- 既能作为强大的个人贡献者,也能管理初级数据工程师
- 理解如何管理工程活动并进行规划