数据工程师角色概述
在可扩展资本,数据工程师负责使用数据领域中最新技术开发可扩展的基于云的数据基础设施。
• 设计并运营高性能的数据管道,利用AWS的S3、Athena、DMS和Glue等经验。
• 创建结合最新技术与监管要求的金融数据仓库,遵循数据治理的最佳实践。
• 准备和清理结构化与非结构化数据,开发高质量的数据模型以支持报告、先进分析和人工智能用例。
• 与技能出色的团队成员合作,推出智能产品功能。
• 在公司内部分享数据最佳实践的专业知识。
所需技能和资格
要成为成功的数据工程师,您应具备:
• 计算机科学、数学、自然科学或相关领域的优秀大学学位,以及相关工作经验。
• 强大的SQL技能,包括窗口函数等高级概念,具备dbt经验者优先。
• 精通Python编程技能,包括Airflow和PySpark等数据处理框架。
• 了解Java和Kotlin者优先。
• 对一切代码化、架构良好、可测试和有文档的代码充满热情。
• 数据驱动的思维方式,具备出色的沟通和演示技能。
• 理解受监管行业的数据治理要求。
• 对金融服务和市场感兴趣。
福利
我们提供:
• 具备最新硬件和工具的高效工作环境。
• 通过内部知识分享会议和个人教育预算提供成长和学习的机会。
• 多样化、包容性强且不断壮大的团队,为客户创造最佳产品。
• 在慕尼黑或柏林中心位置的办公室工作或在德国境内远程工作(如符合条件)的可能性。