Hadoop开发者

15个月前全职
Profusion Tech Labs

Profusion Tech Labs

location 纽约
unsaved
职位名称:Hadoop开发人员 职位类型:全职 地点:弗吉尼亚州泰森斯角(首日上班) 职责: - 负责与开发过程中其他相关人员进行定期沟通 - 实施、测试和修复功能 - 负责软件项目的设计和实施 - 为最终用户提供支持 - 设计、构建和维护高效可靠的数据湖解决方案 - 独立进行数据分析,并提供端到端的问题解决方案 所需技能: - 7年以上数据工程师角色经验 - 3年以上Hadoop/Spark/Snowflake经验 - 使用Spark和Hadoop技术从各种来源设计和实施高调数据摄取管道 - 精通Spark、Hive、Sqoop、Hbase和Snowflake - 有Cloudera、CDP Hadoop分发经验 - 熟练掌握Shell脚本、Scala、Python - 熟练使用Hive、SnowSQL和RDBMS标准编写复杂的SQL语句 - 具备设计和实施现代数据仓库/数据湖解决方案的经验,并了解最佳实践 - 在故障排除和修复实时生产作业中有经验 - 具备AWS云知识和S3、IAM、EMR等技能者优先考虑 - 以客户为中心的态度,愿意直接与最终用户客户接触 - 出色的口头和书面沟通能力 教育背景: - 计算机科学或类似领域的学士学位