数据解决方案架构师
我们正在寻找一位经验丰富的数据工程专业人士,负责大型数据管道的设计和实施。理想的候选人将具备强大的技术专长、出色的领导能力,以及推动项目高效前进的能力。
• 数据管道架构:您将负责设计和构建可扩展的数据摄取和转换管道,以处理批处理和实时流。
• ETL/ELT最佳实践:您将使用dbt、Apache Airflow或类似的编排框架开发稳健、高效的工作流。
• 工作流自动化集成:您将与软件和平台工程师合作,确保数据工作流能够纳入自动化逻辑和业务规则。
• 质量与治理:您将执行数据完整性、版本控制和安全协议,以保护数据质量。
• 性能优化:您将诊断数据处理中的瓶颈,并实施最佳实践以提高吞吐量和可靠性。
• 导师与团队建设:您将在代码审查中以身作则,为初级工程师提供指导,并积极塑造团队内部的知识分享文化。
所需技能与资格
• 您在数据工程方面有扎实的经验,能够设计稳健的大规模数据解决方案。
• 您熟悉Python、数据库交互(SQL和NoSQL)、现代数据平台(如Snowflake、Databricks等),并对维度建模、数据仓库概念和模式设计有深入理解。
• 熟悉实时流处理(如Kafka、Spark等)、云服务提供商(如AWS、Azure或GCP)、容器(Docker)、CI/CD管道或能源行业数据者优先。
• 您能够清晰地用英语沟通,懂德语者优先。
• 您体现敏捷价值观,主动识别数据问题并实施稳健的解决方案。
福利
• 参与高知名度项目,为太阳能革命做出贡献。
• 加入一个拥有65个国籍的多元团队。
• 追求适合您偏好的混合工作模式。
• 在我们现代化的办公室享受一系列福利。
• 参与定期的团队活动,促进社区感。
• 优先考虑通过培训和反馈机会实现持续学习和成长。