1、大数据环境下,根据现有数仓模型实现离线或实时指标开发;
2、熟悉数据库存储过程,能解析相关逻辑并在大数据平台进行实现;
3、进行少数Hive自定义函数的编写;
4、熟悉大数据环境下,查看平台资源使用情况并进行优化;
5、熟练掌握大数据环境下,Mysql,Oracle等结构化数据库与HDFS,MongoDB,HBase等数据库之间数据迁移和转换组件。
任职资格:
1、了解Kafka,熟悉Flink、Hive、Spark底层原理,精通SQL编程、性能调优;
3、熟悉Java、Scala开发语言,及相关开发工具(IntelliJ IDEA或Eclipse等);
3、一年以上数据仓库建设、ETL相关开发经验,具备扎实的数据仓库与模型设计理论基础;
4、有房产业务相关经验者优先。