- 職責描述：
1、基于公司業務需要，建設和設計數據倉庫及數據模型，維護與完善數據模型各類信息；
2、負責大數據資產管理、集群治理的方案設計與落地
3、負責數據倉庫設計，以及數據ETL的設計、開發與性能優化；
4、負責核心數據倉庫模型代碼開發，跟進ETL的完成。負責接入源系統數據的腳本開發、數據測試與驗證、以及調度開發等工作；
5、跟蹤、監測、維護及優化數據模型，確保數據模型被有效使用
任職要求：
1、熟悉數據資產管理、集群治理、數據倉庫和數據模型建設的相關技術細節；
2、熟悉 Hadoop，Hive，Spark等一種以上大數據處理工具和技術， 有實際大數據開發、處理經驗；具備編寫、優化復雜SQL的能力；
3、負責過大型數據平臺或數據倉庫設計，具有扎實的大數據和數據倉庫的理論功底；掌握一定元數據管理方法論、元數據管理設計；
4、掌握一定的數據質量管理方法論、評估模型設計、質量報表設計，能夠根據數據質量要求制定數據質量探查規則并進行實施；
5、邏輯思維能力強，對數據敏感，有較強的學習能力和創新思維；
6、5年以上大數據開發、分析相關項目經驗；
7、熟悉sparkStreaming、flink，且有實時項目開發經驗，能獨立完成開發任務；
8、有互聯網數據研發、海量數???處理分析、OLAP項目開發或用戶行為數據分析經驗者優先；
9、有參與開源項目對社區有貢獻的經驗者優先；
10、熱愛計算機科學和互聯網技術，樂于快速學習和嘗試新技術、新工具。
|