数据工程师(Python、SQL和云技术专家)

14个月前全职
Cutting Edge Search

Cutting Edge Search

location 伦敦
unsaved
伦敦的混合职位 - 每周在办公室工作1天 我们目前正在寻找一名高级数据工程师加入我们在伦敦的团队。我们正在通过将大数据与广泛的机器学习能力相结合,开创一种革命性的数字营销方法。我们的数据集规模庞大,每月收集超过十亿用户的数据,并每天分析数亿份文档的内容。 技术要求 • Python • ElasticSearch • SQL • BigQuery 基本要求 • 计算机科学或相关领域的高级学位(学士/硕士)。 • 熟练掌握Python和SQL的编程技能。 • 在Google Cloud Platform或其他云环境中有工作经验,专注于开发可扩展的数据管道(使用Apache Airflow进行批处理,使用Dataflow进行流处理)。 • 热衷于处理大规模数据集(BigQuery,Apache Druid,Elasticsearch)。 • 熟悉Terraform,DBT和Looker者优先。 • 在性能优化和成本降低方面有实际经验。 • 具备商业意识,热衷于打造卓越的产品。 职责 • 作为我们数据平台团队的一员,您的职责将包括: • 设计、构建、测试和维护高容量的Python数据管道。 • 使用SQL分析复杂数据集。 • 与产品经理和商业团队有效沟通,将复杂的业务需求转化为可扩展的解决方案。 • 遵循软件开发的最佳实践。 • 在敏捷环境中独立工作。 • 在深度技术专长领域向业务分享知识,并指导同事。