大数据开发者

16个月前合同
WEB SYNERGIES (S) PTE LTD

WEB SYNERGIES (S) PTE LTD

location 新加坡
unsaved
技术技能 团队架构(大数据) - 在大数据生态系统(如Cloudera、ElasticSearch、Spark、Presto、Hive、Impala、Kibana、Logstash、Hbase、Kafka)中具有5年以上的应用开发经验 - 精通大型数据库,如Teradata、Oracle - 精通高级SQL(Teradata BTEQ、Fact Load、GCFR、Oracle PL-SQL) - 精通使用Scala、Java、Python、Shell脚本、Go构建云原生框架和playbook - 在大数据生态系统中使用Spark、Hive、Impala、Apache Kudu、Ozone、Presto、Tez、Iceberg等进行大规模实施和性能优化的经验 - 熟悉Spring、Struts、Hibernate等框架 - 熟悉面向对象编程、多线程、容器化等知识 - 熟悉Informatica等数据集成工具 - 熟悉元数据工具、数据质量工具者优先考虑 - 熟悉与Devops工具集成应用的技能 至少有以下任何技术的2到3个技术认证: 1. SQL - Teradata、Oracle 2. 编程语言 - SQL、Java、Python、Scala、Javascript、node.js 3. 自动化/脚本 - CtrlM、Shell脚本、Groovy 4. Cloudera Hadoop分布 - Hive、Impala、Spark、Kudo、Kafka、Flume 所有团队都需要具备以下额外经验以获得优势: 1. CI/CD软件、测试工具 - Jenkins、SonarQube 2. 版本控制工具 - Aldon+LMe、CA Endeavor 3. 部署工具包 - Jenkins 4. 服务或事件管理(IcM)工具 - Remedy 5. 源代码存储库工具 - Bitbucket 6. 调度工具 - Control-M 7. 缺陷管理工具 - JIRA 8. 应用测试工具 - QuerySurge 9. 云认证 10. FICO、Experian、SAS提供的用于信用和组合管理的平台的相关经验