职位:数据工程师-永久-混合型
地点:伦敦,混合型(周一、周二和周四在办公室)
职位类型:永久
职位描述:
作为一名数据工程师,您将在设计、开发和维护数据架构和基础设施方面发挥关键作用。成功的候选人应具备扎实的Python、pyspark、SQL和ETL流程基础,并能够在云环境中实施解决方案。
必备技能:
• 使用Python、PySpark和SQL设计、构建和维护数据管道和ETL流程
• 开发和维护ETL流程,将数据从各种数据源移动到我们在AWS/Azure/GCP云上的数据仓库中。
• 与数据科学家、业务分析师合作,了解他们的数据需求,并开发满足其要求的解决方案。
• 开发和维护我们数据仓库的数据模型和数据字典。
• 开发和维护我们数据管道和数据仓库的文档。
• 不断改进我们数据解决方案的性能和可扩展性。
资质要求:
• 总体IT经验6年以上
• 至少4年以上的Python、Spark/Pyspark、SQL编程经验