技术技能
团队架构(大数据)
- 在大数据生态系统(如Cloudera、ElasticSearch、Spark、Presto、Hive、Impala、Kibana、Logstash、Hbase、Kafka)中具有5年以上的应用开发经验
- 精通大型数据库,如Teradata、Oracle
- 精通高级SQL(Teradata BTEQ、Fact Load、GCFR、Oracle PL-SQL)
- 精通使用Scala、Java、Python、Shell脚本、Go构建云原生框架和playbook
- 在大数据生态系统中使用Spark、Hive、Impala、Apache Kudu、Ozone、Presto、Tez、Iceberg等进行大规模实施和性能优化的经验
- 熟悉Spring、Struts、Hibernate等框架
- 熟悉面向对象编程、多线程、容器化等知识
- 熟悉Informatica等数据集成工具
- 熟悉元数据工具、数据质量工具者优先考虑
- 熟悉与Devops工具集成应用的技能
至少有以下任何技术的2到3个技术认证:
1. SQL - Teradata、Oracle
2. 编程语言 - SQL、Java、Python、Scala、Javascript、node.js
3. 自动化/脚本 - CtrlM、Shell脚本、Groovy
4. Cloudera Hadoop分布 - Hive、Impala、Spark、Kudo、Kafka、Flume
所有团队都需要具备以下额外经验以获得优势:
1. CI/CD软件、测试工具 - Jenkins、SonarQube
2. 版本控制工具 - Aldon+LMe、CA Endeavor
3. 部署工具包 - Jenkins
4. 服务或事件管理(IcM)工具 - Remedy
5. 源代码存储库工具 - Bitbucket
6. 调度工具 - Control-M
7. 缺陷管理工具 - JIRA
8. 应用测试工具 - QuerySurge
9. 云认证
10. FICO、Experian、SAS提供的用于信用和组合管理的平台的相关经验