崗位職責:
1.核心功能模塊的開發(fā)和維護:包括統(tǒng)一數(shù)據(jù)集成(實時、離線)、數(shù)據(jù)研發(fā)(實時、離線)、統(tǒng)一作業(yè)調(diào)度(調(diào)度引擎、調(diào)度編排)、數(shù)據(jù)分析(adhoc、batch、混合引擎)、數(shù)據(jù)地圖(元數(shù)據(jù)采集、全鏈路血緣)、數(shù)據(jù)治理(數(shù)據(jù)質(zhì)量評測體系,質(zhì)量指標、監(jiān)控告警)等。
2.數(shù)據(jù)架構(gòu)設計:參與研發(fā)過程中的數(shù)據(jù)架構(gòu)及存儲方案設計評審,協(xié)同規(guī)劃企業(yè)業(yè)務數(shù)據(jù)體系架構(gòu)設計,數(shù)據(jù)領域模型建設。
3.數(shù)據(jù)標準制定:制定數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)安全等大數(shù)據(jù)領域相關(guān)標準,并推動落地。
任職要求:
1.本科及以上學歷,計算機相關(guān)專業(yè),10年以上數(shù)據(jù)研發(fā)領域經(jīng)驗。
2.精通數(shù)據(jù)平臺和倉庫相關(guān)理論,有企業(yè)級的數(shù)據(jù)倉庫建設經(jīng)驗,有數(shù)據(jù)治理相關(guān)經(jīng)驗。
3.對批流一體、數(shù)據(jù)湖、數(shù)據(jù)治理等業(yè)內(nèi)前沿方向有深刻理解,有實際團隊落地經(jīng)驗者優(yōu)先。
4.熟悉大數(shù)據(jù)相關(guān)組建運維優(yōu)化,如Doris、iceberg、HBase、ES、Spark、Kafka、Flink等,熟練掌握其中若干項。
5.良好的業(yè)務理解力,能從業(yè)務視角看問題,從技術(shù)角度解決業(yè)務問題。