数据工程师(Hadoop)

14个月前合同
ConglomerateIT LLC

ConglomerateIT LLC

location 洛杉矶
unsaved
职位描述 关于综合IT 综合IT是一家经过认证的公司,是提供高端全球劳动力解决方案和IT服务的先驱,为不同领域的各种客户提供服务。访问我们的网站www.conglomerateit.com。 综合IT的使命是建立全球跨文化的人际关系,促进员工的职业发展,加强客户的业务。我们致力于利用全球网络的力量,无偏见地将企业与合适的人才联系起来。我们提供友好的全球劳动力解决方案。 我们提供各种服务,涵盖不同领域、类别、技能集和不同长度的任务/核心能力,包括: • 应用开发服务 • 商业智能服务 • 企业资源规划 • 基础设施支持服务 • 测试服务 • 计划/项目管理 • 临时和永久人员配备 综合IT是一家经过认证的公司,是提供高端全球劳动力解决方案和IT服务的先驱,为不同领域的各种客户提供服务。访问我们的网站conglomerateit.com。 综合IT的使命是建立全球跨文化的人际关系,促进员工的职业发展,加强客户的业务。我们致力于利用全球网络的力量,无偏见地将企业与合适的人才联系起来。我们提供友好的全球劳动力解决方案。 综合IT总部位于德克萨斯州阿迪森市,分支机构遍布加拿大、印度、斯里兰卡、阿根廷,以进一步为客户提供服务。 职位名称:数据工程师 地点:远程 工作许可:美国公民、永久居民、GCEAD、H1B转让、H4EAD 税务条款:仅限W2 / 1099 所需经验:10-15年 职位类型:合同 职责和责任: • 在Big Data技术方面具有强大的项目经验,特别是在Cloudera Distribution 7.x环境中。 • 领导或参与云迁移项目,特别是与亚马逊和Cloudera CDP的无缝集成。 • 使用关键的Hadoop组件(如Spark、Spark SQL、Hbase、SOLR、Sqoop、Hive、MR和Impala)设计、开发和维护数据流水线。 • 至少拥有4-5年的Python、Java和Scala编程经验,专注于Hadoop相关项目。 • 使用Python框架(如Django、Flask等)开发和维护RESTful API。 • 使用Spring框架参与微服务/ Web服务开发。 • 与跨职能团队合作,了解数据需求并提供可扩展的解决方案。 • 确保基于Hadoop的解决方案的可靠性、可扩展性和最佳性能 • 资格: • 在Big Data、Cloudera Distribution 7.x、云迁移、关系数据库管理系统方面具有强大的项目经验。 • 在亚马逊、Cloudera CDP方面具有强大的项目经验。 • 至少有4-5年使用Hadoop组件Spark、Spark SQL、Hbase、SOLR、Sqoop、Hive、MR、Impala构建数据流水线的经验。 • 必须具备4-5年的Python、Java和Scala编程经验。 • 使用Python框架(Django、Flask等)进行REST API开发的丰富经验。 • 使用Spring框架进行微服务/ Web服务开发的经验。 待遇是什么? • 加入世界一流的IT专业团队 • 全面的薪资待遇 • 发展和成长的绝佳机会