职位描述
什么使得Cognizant成为一个独特的工作场所？快速增长和国际创新的环境的结合！这为像你这样有创业精神、想要在这个世界上产生影响的人们创造了许多机会。在Cognizant，与来自世界各地的同事们一起，你将合作解决世界领先公司的问题，帮助他们变得更加灵活、创新和成功。此外，这是你成为成功故事的一部分的机会。
职位概述：
我们正在寻找一位大数据开发人员，负责收集、加载、处理和分析大量数据。主要关注选择用于这些目的的最佳解决方案，然后进行维护、实施和监控。你还将负责将它们与公司所使用的架构集成。
• 接触或了解各种本地、混合和云数据平台，包括Azure/AWS。
• 在Microsoft Azure/AWS中设计和开发创新的多云场景云解决方案。
• 在批处理框架和hive/impala方面有7年以上的编码经验。 (使用Scala/Java/Python/PL-SQL、Unix等语言)
• 在本地云中设计、构建和实施Lambda架构的经验。
• 在创建数据工厂流水线以接收来自不同格式的平面文件的数据方面具有专业知识。
• 在使用SQL分析存储在数据仓库中的数据方面具有丰富的经验。
• 在SQL数据库中编写存储过程、函数以处理或转换大型数据集方面具有专业知识。
• 内部专有工具 - 3年以上使用JOF Job、Merlin和JOF Ingestion和Replication框架的工作经验，以开发数据摄取流水线和部署代码工件。
• 使用Azure Data Lake、Azure Data factory、Azure Databricks实施端到端数据流水线。
• 熟悉Azure Synapse、Azure SQL、Azure Blob Storage和Azure Data Lake Storage Gen2等数据库服务和数据湖。
• 在使用Azure DevOps、GITHUB集成、Jenkins、Bamboo等设置高级部署技术方面具有扎实的经验。
• 参与端到端项目执行，需求收集，将传统设计转换为大数据生态系统。开发、测试、UAT支持和上线支持。
• 了解并创建Tableau/PowerBI报告将是额外的优势。
• 应具备使用Control M创建、监控和调度作业的知识。
必备技能：
• 大数据PaaS服务生态系统：Hadoop、Flume、Kafka、Spark Streaming、Spark SQL、Impala、SQL DW、Kudu表。
• 编程语言：SQL、PL-SQL、Java、UNIX、Scala、Python和Ruby。
• Azure技术栈：Azure Function、Azure EventHub、Azure HDInsight、Azure Data Bricks、Azure VM、Azure Data Factory、Azure存储、Azure Data Lake、Azure Cosmos DB、Azure KeyVault、Azure SQLDW(Synapse)。
• AWS技术栈：Kinesis、Lambda、S3、EC2、DynamoDB、API Gateway、KMS、VPC、CloudWatch、IAM角色和策略。
• DevOps工具：Azure DevOps、JIRA、GIT、Bitbucket、Bamboo、Jenkins、Confluence。
• 客户特定：JOF Job、Merlin、JOF Ingestion框架、Control M。
职责：
• 负责在本地或云上设计、编码、测试、文档和维护高质量、可扩展的大数据解决方案。
• 研究、评估和部署新的工具框架和设计模式，构建可持续的大数据平台。
• 积极与利益相关者、产品专家和数据架构师沟通和协作，捕捉功能和非功能需求。
• 提供准确的开发工作量估计，协助管理层进行项目规划。
• 负责将本地工作负载迁移到云端，并调试云堆栈。
• 负责设计和构建CI/CD和/或DevOps流水线，并通过部署自动化改进现有工作流程。
• 及时、专业地回应技术问题。
• 确定、设计和实施内部流程改进：自动化手动流程、优化数据交付、重新设计基础架构以提高可扩展性等。
薪资范围：> 100,000美元
下一步：如果你觉得这个机会适合你，或者Cognizant是你想加入的类型的组织，我们希望与你进行交流！请直接与我们申请。了解Cognizant的所有开放职位，请访问http://www.cognizant.com/careers。Cognizant致力于提供平等的就业机会。成功的候选人将需要进行背景调查。
员工状态：全职员工
班次：白班工作
出差：无
职位发布日期：2024年1月30日
关于Cognizant
Cognizant（纳斯达克100：CTSH）是世界领先的专业服务公司之一，为数字时代的客户业务、运营和技术模型进行转型。我们独特的基于行业的咨询方法帮助客户构想、构建和运营更具创新性和高效性的业务。总部位于美国的Cognizant在《财富》500强中排名第185位，并始终被列为世界上最受钦佩的公司之一。了解Cognizant如何帮助客户引领数字化，请访问www.cognizant.com或关注我们的Twitter账号@Cognizant。 
悉尼