职责和责任
职责
• 提供解决方案并推动DOPS功能的实施,包括构建IAC基础设施、Git Lab重组、Git Lab升级监控等。
• 对数据战略有远见并能够交付。
• 能够领导数据管理流程的设计和实施,包括数据获取、集成和转换。
• 能够管理和领导数据专业人员团队,提供指导、指导和培养一个以持续改进为重点的协作和创新的团队文化。
• 评估和推荐与数据相关的技术、工具和平台。
• 与IT团队合作,确保数据解决方案的无缝集成。
• 实施和执行数据安全协议,并确保符合相关法规。
• 能够在多利益相关者环境中的团队中工作。
• 能够向技术、业务和管理团队等不同团队传达复杂的技术解决方案。
所需资格:
• 计算机科学或STEM(科学、技术、工程或数学)/相关领域的学士学位。
• 至少8年以上使用RDBMS和非RDBMS数据库的强大数据仓库经验。
• 至少5年的近期实际编码经验,作为数据工程师(后端软件工程师也被考虑在内)。
• 在设计新架构和为现有架构提供优化解决方案方面具有强大的AWS知识。
• 必须具备在敏捷、动态和面向客户的环境中工作的专业经验。
• 高度推荐了解分布式系统和云技术(AWS)。
• 最好具备数据流和可扩展数据处理的理解。
• 具有大规模数据集、数据湖和数据仓库技术(如AWS Redshift、Google BigQuery、Snowflake)的经验。最好具有对Snowflake及其架构的深入了解。
• 至少2年以上的ETL(AWS Glue)、Amazon S3、Amazon RDS、Amazon Kinesis、Amazon Lambda、Apache Airflows、Amazon Step Functions经验。
• 具备Python、UNIX shell和Spark等脚本语言的强大知识。
• 理解RDBMS、数据摄取、数据流、数据集成等。
• 具备数据模型、数据挖掘和分割技术的技术专长。
• 具备完整的SDLC生命周期和精益或敏捷开发方法。
• 熟悉CI/CD和GIT部署。
告诉雇主您拥有哪些技能
Snowflake云数据仓库
Amazon RDS
解决方案
分割
数据仓库
Unix shell
ETL
数据集成
SDLC
数据挖掘
分布式系统
Python
RDBMS
S3
Apache
数据战略
敏捷开发