职位名称:Hadoop开发人员
职位类型:全职
地点:弗吉尼亚州泰森斯角(首日上班)
职责:
- 负责与开发过程中其他相关人员进行定期沟通
- 实施、测试和修复功能
- 负责软件项目的设计和实施
- 为最终用户提供支持
- 设计、构建和维护高效可靠的数据湖解决方案
- 独立进行数据分析,并提供端到端的问题解决方案
所需技能:
- 7年以上数据工程师角色经验
- 3年以上Hadoop/Spark/Snowflake经验
- 使用Spark和Hadoop技术从各种来源设计和实施高调数据摄取管道
- 精通Spark、Hive、Sqoop、Hbase和Snowflake
- 有Cloudera、CDP Hadoop分发经验
- 熟练掌握Shell脚本、Scala、Python
- 熟练使用Hive、SnowSQL和RDBMS标准编写复杂的SQL语句
- 具备设计和实施现代数据仓库/数据湖解决方案的经验,并了解最佳实践
- 在故障排除和修复实时生产作业中有经验
- 具备AWS云知识和S3、IAM、EMR等技能者优先考虑
- 以客户为中心的态度,愿意直接与最终用户客户接触
- 出色的口头和书面沟通能力
教育背景:
- 计算机科学或类似领域的学士学位