职位名称:高级项目的数据工程师
这是一个远程职位,需要一位熟练的专业人士来支持多个业务部门的复杂数据项目。
• 主要职责:
• 利用 Apache Iceberg 高效管理大型数据集。
• 使用 AWS Glue 开发和维护数据质量检查。
• 与 DevOps 团队合作,使用 Terraform 部署基础设施。
• 使用 QuickSight 构建仪表板和可视化。
• 与各个业务部门紧密合作,收集需求并将其转化为可操作的数据解决方案。
• 确保数据解决方案安全、可靠,并符合最佳实践。
所需技能和资格:
• 在数据建模和架构方面有证明的经验。
• 精通 Apache Iceberg、AWS Glue 和 SQL Server。
• 熟悉 DevOps 实践,尤其是 Terraform。
• 有使用 QuickSight 或类似商业智能工具的经验。
• 强大的沟通能力,能够跨职能合作。
• 能够将业务需求转化为技术规格。
资格要求:
3-4 年在数据、分析、工程或相关领域的工作经验。
优先要求:
有在生产中构建或管理数据管道的经验。熟悉数据服务水平目标、验证和管道健康的最佳实践。