Dice是技术专家在其职业生涯各个阶段的首选职业目的地。我们的客户,Cyber Sphere LLC,正在寻求以下职位。今天通过Dice申请!
职位 - 高级数据工程师
地点 - 纽约市现场 - 需要本地人
合同期限
负责数据管道和后端服务的设计、构建和部署,Snowflake数据建模,以及丰富的数据工程经验。
职位概述
我们正在寻找一位高级数据工程师,负责设计、构建和部署可扩展的数据管道和后端数据服务。理想的候选人应具备丰富的Snowflake数据建模、现代数据工程实践经验,并能够构建支持分析和商业智能的可靠、高性能数据平台。
主要职责
• 设计、构建和部署用于大规模数据处理的端到端数据管道。
• 开发和维护后端数据服务和API以支持数据消费。
• 执行Snowflake数据建模,包括模式设计、优化和性能调优。
• 为结构化和半结构化数据源实施ELT/ETL流程。
• 优化Snowflake中的数据存储、查询性能和成本效率。
• 确保数据质量、可靠性、安全性和管道治理。
• 与数据科学家、分析师和业务利益相关者合作,了解数据需求。
• 为数据管道实施监控、日志记录和警报。
• 支持数据工程部署的CI/CD管道。
• 记录数据流、架构和最佳实践。
所需技能和资格
• 10年以上数据工程或相关职位经验。
• 丰富的Snowflake实际操作经验(数据建模、性能调优、安全性)。
• 精通SQL和数据转换技术。
• 熟练使用Python和/或Java进行后端数据处理。
• 具有构建可扩展ETL/ELT管道的经验。
• 了解数据编排工具(Airflow、Azure Data Factory或类似工具)。
• 具有云平台经验(AWS、Azure或Google Cloud Platform)。
• 熟悉CI/CD、Git和DevOps实践。
• 具备较强的问题解决和沟通能力。
优先条件
• 具有流技术经验(Kafka、Kinesis)。
• 接触过dbt或现代转换框架。
• 在大型企业或受监管环境中有经验。
• 了解数据治理和元数据管理工具。
此致,
Sai Srikar
电子邮件: