Hadoop管理员

芝加哥 7天前全职 网络
面议
Net2Source, Inc. 是美国发展最快的IT咨询公司之一。N2S总部位于美国新泽西州,并在亚太地区设有分支机构。N2S提供广泛的咨询解决方案,定制化满足客户需求,包括人员配置、培训和技术。 职位概要: 职位名称:Hadoop管理员 工作地点:伊利诺伊州诺斯布鲁克或亚利桑那州斯科茨代尔或罗德岛州伍恩索基特,德克萨斯州理查森 工作期限:6个月以上 开始日期:尽快 职位描述: • 高级Hadoop管理员职位职责: • 管理可扩展的Hadoop虚拟和物理集群环境。 • 管理Hadoop数据的备份和灾难恢复。 • 优化和调整Hadoop环境以满足性能要求。 • 为所有关键的Hadoop系统和服务安装和配置监控工具。 • 与大数据开发人员合作,设计特定用例的可扩展支持基础设施。 • 为开发、支持和业务分析团队的日常请求提供非常及时的支持。 • 对运行缓慢的开发和生产过程进行性能分析和调试。 • 对Hbase、Kafka、Spark、Hive、HDFS、YARN和Ambari等服务有扎实的技术理解。 • 与Linux服务器管理员团队合作管理服务器硬件和操作系统。 • 协助开发和维护系统文档。 • 创建和发布各种生产指标,包括系统性能和可靠性信息,提供给系统所有者和管理层。 • 执行持续的容量管理预测,包括时间和预算考虑。 • 协调根本原因分析(RCA)工作,以尽量减少未来的系统问题。 • 根据需要指导、发展和培训其他系统操作人员。 • 根据需要提供非工作时间支持。 • 有基于Isilon的Hadoop经验者优先。 技术资格: 1) 至少3年安装和配置Hortonworks Hadoop集群的经验 2) HDFS文件系统的备份和恢复(基于Java的分布式文件系统) 3) 集群使用的mySQL数据库 4) 配置和维护HDFS、YARN(另一种资源调度器)资源管理器的高可用性。MapReduce、Hive、HBASE、Kafka和Spark 5) 有设置Kerberos和管理Kerberos集群的经验。 6) Ranger服务配置和策略设置。(认证) 7) Knox服务配置。(反向代理,Hadoop的策略执行)...访问控制 8) 对使用ODBC/JDBC与各种客户端(如Tableau、Microstrategy)和服务器组件(如Hive/Spark和Hbase)的深刻理解和经验 9) 诊断和解决单个服务问题。 10) 监控和调整集群组件性能。 11) 非常熟练地使用各种Linux命令进行日常操作,并具备分析和创建Shell脚本的能力。 关于Net2Source, Inc. Net2Source是全球1000多名顾问的首选雇主。我们为全美的40多家财富和政府客户招聘顶尖人才。我们是美国发展最快的公司之一,这可能是您加入我们的机会! 想了解更多关于Net2Source的信息?请访问我们的网站:www.net2source.com