大数据和Kubernetes管理员

无个税15个月前全职
Commit

Commit

location 利雅得
unsaved
亲爱的候选人, 来自COMM-IT Middle East LLC的问候 我们正在寻找一名大数据和Kubernetes管理员,请阅读职位描述并回复确认。 职位标题:大数据和Kubernetes管理员 地点:沙特阿拉伯 职位摘要: 作为一名大数据管理员,您将负责管理我们的大数据基础设施和Cloudera生态系统和Kubernetes集群中的工具。您将在我们的数据团队中发挥关键作用,确保我们的数据解决方案的高可用性、性能和安全性。 主要职责: • 在多个环境中安装、配置和维护Cloudera大数据集群,确保最佳性能和资源利用率。 • 执行集群维护任务,如打补丁、升级和迁移,应用最佳实践以实现最小停机时间。 • 确保数据服务(如Kafka、HDFS、HBASE、Hive和Impala)的高可用性和性能。 • 架构、开发和维护可扩展的数据管道,确保组织内部无缝数据集成和流动。 • 实施、管理和管理本地、云无关和云原生的大数据技术和容器编排系统,如Kubernetes(Openshift或等效)。 • 确保处理大规模数据处理、存储和分析工作负载的Kubernetes集群的高效运行,优化性能、可靠性和可扩展性。 • 实施和管理安全和合规措施,应用Cloudera Ranger、Ranger KMS、KTS和Atlas工具来保护数据完整性。 • 与各团队合作,优化Cloudera数据服务的数据工程、数据仓库和机器学习。 • 积极监控系统性能,调整系统设置,并进行容量规划以满足服务级别协议(SLA)。 • 在Kubernetes基础设施内执行安全策略和合规标准。 • 使用Shell、基本的Java/Scala/Python编写和维护高级脚本,以实现自动化和例行任务管理。 • 实施、配置和管理Ceph作为Kubernetes(Openshift)的分布式存储解决方案,确保高效处理存储需求。 • 利用Openshift Virtualization在Kubernetes环境中部署和管理虚拟机和容器工作负载。 • 计划和执行系统备份和恢复策略,以保持数据安全和高服务可用性。 • 与IT基础设施和开发团队协调,使大数据系统与组织目标保持一致。 • 了解最新的大数据技术,并为知识共享和团队培训做出贡献。 • 记录系统配置,维护标准操作程序,并管理基础设施变更的版本控制。 • 与软件供应商联系,获取技术支持,确保维护服务标准和水平。 • 负责在大数据生态系统中实施、管理和故障排除Kerberos身份验证协议,以确保所有节点和服务的安全访问控制。这包括配置Kerberos主体、keytab文件,并管理Kerberos票证。 • 您还需要及时更新和保护Kerberos基础设施,并与安全团队密切合作,定期审计和改进身份验证措施。 • 通过实施行业标准的加密方法,确保数据的机密性、完整性和可用性。这包括为数据在网络传输中的数据配置TLS(传输层安全)以保护数据,在数据静止时管理数据的加密,使用Hadoop的加密区域或第三方加密工具。熟悉密钥管理实践和数据保护的安全合规要求。此角色还涉及定期审计、开发和维护数据加密的安全策略和程序,以及进行漏洞评估和修复。 技术资格: • 熟练掌握Cloudera套件,包括Kafka、HDFS、HBASE、KUDU、Zookeeper、HIVE、Impala、NIFI、SPARK、FLINK、Oozie、Yarn、Atlas、Ranger、RangerKMS和KTS。 • 有Cloudera ECS和Cloudera数据服务(如Cloudera数据工程、Cloudera数据仓库和Cloudera机器学习)的经验。 • 熟练掌握Kubernetes(Openshift或等效)等容器编排系统。 • 在Linux系统管理和Shell脚本方面有较强的背景。 • 具备Java、Scala或Python的基本编程技能。 • 有Neo4j等图形数据库的经验者优先考虑。 • 了解云原生大数据技术和架构原则。 • 深入了解并具有实践经验,配置和管理安全的大数据环境中的Kerberos身份验证。熟练掌握设置Kerberos领域、故障排除Kerberos身份验证问题以及定期进行安全检查和配置审计。 • 对于保护数据的加密协议和标准有深入了解。具有在分布式网络中配置TLS/SSL以保护数据在传输中的经验,并使用Hadoop的加密区域或第三方加密工具为静止数据实施加密解决方案。熟悉密钥管理实践和数据保护的安全合规要求。 教育背景: • 计算机科学、信息技术或相关领域的学士学位。 认证: • 优先考虑Cloudera认证管理员。 • 必须具备Kubernetes认证。 软技能: • 出色的解决问题和分析能力。 • 良好的沟通和协作能力。 • 积极主动的态度和愿意主动承担责任。 公司行业 IT - 软件服务 部门/职能区域 数据库管理员 数据仓库(IT软件) 关键词 免责声明:Naukrigulf.com仅是将求职者和雇主联系在一起的平台。建议申请人独立调查潜在雇主的真实性。我们不赞成任何要求支付费用的行为,并严格建议不要分享个人或银行相关信息。我们还建议您访问安全建议了解更多信息。如果您怀疑任何欺诈或违规行为,请发送电子邮件至abuse@naukrigulf.com 寻找数据管理员职位的人还搜索了 #J-18808-Ljbffr