标题 - 高级数据工程师
地点 - 现场 @纽约市 - 需要本地人
合同期限
设计、构建和部署数据管道和后端服务,Snowflake 数据建模,以及丰富的数据工程经验。
职位概要
我们正在寻找一位高级数据工程师来设计、构建和部署可扩展的数据管道和后端数据服务。理想的候选人应具备丰富的 Snowflake 数据建模、现代数据工程实践经验,能够构建支持分析和商业智能的可靠、高性能数据平台。
主要职责
• 设计、构建和部署用于大规模数据处理的端到端数据管道。
• 开发和维护后端数据服务和 API 以支持数据消费。
• 执行 Snowflake 数据建模,包括模式设计、优化和性能调优。
• 实施结构化和半结构化数据源的 ELT/ETL 过程。
• 优化 Snowflake 中的数据存储、查询性能和成本效率。
• 确保数据质量、可靠性、安全性和管道治理。
• 与数据科学家、分析师和业务利益相关者合作以了解数据需求。
• 为数据管道实施监控、日志记录和警报。
• 支持数据工程部署的 CI/CD 管道。
• 记录数据流、架构和最佳实践。
所需技能和资格
• 10 年以上数据工程或相关职位的经验。
• 丰富的 Snowflake 实践经验(数据建模、性能调优、安全性)。
• 精通 SQL 和数据转换技术。
• 熟练使用 Python 和/或 Java 进行后端数据处理。
• 具有构建可扩展 ETL/ELT 管道的经验。
• 了解数据编排工具(Airflow、Azure Data Factory 或类似工具)。
• 具有云平台(AWS、Azure 或 Google Cloud Platform)的经验。
• 熟悉 CI/CD、Git 和 DevOps 实践。
• 较强的问题解决和沟通能力。
加分项
• 具有流技术(Kafka、Kinesis)经验。
• 接触过 dbt 或现代转换框架。
• 在大型企业或受监管环境中有经验。
• 了解数据治理和元数据管理工具。
此致,
Sai Srikar
电子邮件: