亲爱的候选人,
来自COMM-IT Middle East LLC的问候
我们正在寻找一名大数据和Kubernetes管理员,请阅读职位描述并回复确认。
职位标题:大数据和Kubernetes管理员
地点:沙特阿拉伯
职位摘要:
作为一名大数据管理员,您将负责管理我们的大数据基础设施和Cloudera生态系统和Kubernetes集群中的工具。您将在我们的数据团队中发挥关键作用,确保我们的数据解决方案的高可用性、性能和安全性。
主要职责:
• 在多个环境中安装、配置和维护Cloudera大数据集群,确保最佳性能和资源利用率。
• 执行集群维护任务,如打补丁、升级和迁移,应用最佳实践以实现最小停机时间。
• 确保数据服务(如Kafka、HDFS、HBASE、Hive和Impala)的高可用性和性能。
• 架构、开发和维护可扩展的数据管道,确保组织内部无缝数据集成和流动。
• 实施、管理和管理本地、云无关和云原生的大数据技术和容器编排系统,如Kubernetes(Openshift或等效)。
• 确保处理大规模数据处理、存储和分析工作负载的Kubernetes集群的高效运行,优化性能、可靠性和可扩展性。
• 实施和管理安全和合规措施,应用Cloudera Ranger、Ranger KMS、KTS和Atlas工具来保护数据完整性。
• 与各团队合作,优化Cloudera数据服务的数据工程、数据仓库和机器学习。
• 积极监控系统性能,调整系统设置,并进行容量规划以满足服务级别协议(SLA)。
• 在Kubernetes基础设施内执行安全策略和合规标准。
• 使用Shell、基本的Java/Scala/Python编写和维护高级脚本,以实现自动化和例行任务管理。
• 实施、配置和管理Ceph作为Kubernetes(Openshift)的分布式存储解决方案,确保高效处理存储需求。
• 利用Openshift Virtualization在Kubernetes环境中部署和管理虚拟机和容器工作负载。
• 计划和执行系统备份和恢复策略,以保持数据安全和高服务可用性。
• 与IT基础设施和开发团队协调,使大数据系统与组织目标保持一致。
• 了解最新的大数据技术,并为知识共享和团队培训做出贡献。
• 记录系统配置,维护标准操作程序,并管理基础设施变更的版本控制。
• 与软件供应商联系,获取技术支持,确保维护服务标准和水平。
• 负责在大数据生态系统中实施、管理和故障排除Kerberos身份验证协议,以确保所有节点和服务的安全访问控制。这包括配置Kerberos主体、keytab文件,并管理Kerberos票证。
• 您还需要及时更新和保护Kerberos基础设施,并与安全团队密切合作,定期审计和改进身份验证措施。
• 通过实施行业标准的加密方法,确保数据的机密性、完整性和可用性。这包括为数据在网络传输中的数据配置TLS(传输层安全)以保护数据,在数据静止时管理数据的加密,使用Hadoop的加密区域或第三方加密工具。熟悉密钥管理实践和数据保护的安全合规要求。此角色还涉及定期审计、开发和维护数据加密的安全策略和程序,以及进行漏洞评估和修复。
技术资格:
• 熟练掌握Cloudera套件,包括Kafka、HDFS、HBASE、KUDU、Zookeeper、HIVE、Impala、NIFI、SPARK、FLINK、Oozie、Yarn、Atlas、Ranger、RangerKMS和KTS。
• 有Cloudera ECS和Cloudera数据服务(如Cloudera数据工程、Cloudera数据仓库和Cloudera机器学习)的经验。
• 熟练掌握Kubernetes(Openshift或等效)等容器编排系统。
• 在Linux系统管理和Shell脚本方面有较强的背景。
• 具备Java、Scala或Python的基本编程技能。
• 有Neo4j等图形数据库的经验者优先考虑。
• 了解云原生大数据技术和架构原则。
• 深入了解并具有实践经验,配置和管理安全的大数据环境中的Kerberos身份验证。熟练掌握设置Kerberos领域、故障排除Kerberos身份验证问题以及定期进行安全检查和配置审计。
• 对于保护数据的加密协议和标准有深入了解。具有在分布式网络中配置TLS/SSL以保护数据在传输中的经验,并使用Hadoop的加密区域或第三方加密工具为静止数据实施加密解决方案。熟悉密钥管理实践和数据保护的安全合规要求。
教育背景:
• 计算机科学、信息技术或相关领域的学士学位。
认证:
• 优先考虑Cloudera认证管理员。
• 必须具备Kubernetes认证。
软技能:
• 出色的解决问题和分析能力。
• 良好的沟通和协作能力。
• 积极主动的态度和愿意主动承担责任。
公司行业
IT - 软件服务
部门/职能区域
数据库管理员
数据仓库(IT软件)
关键词
免责声明:Naukrigulf.com仅是将求职者和雇主联系在一起的平台。建议申请人独立调查潜在雇主的真实性。我们不赞成任何要求支付费用的行为,并严格建议不要分享个人或银行相关信息。我们还建议您访问安全建议了解更多信息。如果您怀疑任何欺诈或违规行为,请发送电子邮件至abuse@naukrigulf.com
寻找数据管理员职位的人还搜索了
#J-18808-Ljbffr