崗位職責:
1. 負責大數據平臺的設計與優化,確保數據架構與業務需求相匹配,支持業務決策和創新。
2. 指導大數據項目的技術選型和架構設計,推動技術方案的實施和落地。
3. 管理和維護大數據生態系統,包括數據存儲、處理、分析工具的集成與優化。
4. 與業務部門緊密合作,識別數據價值點,制定數據驅動的業務策略。
5. 持續關注大數據領域的技術發展趨勢,推動技術革新和創新應用。
任職要求:
1.本科及以上學歷,計算機相關專業;
2.具有5年以上大數據架構經驗;
3.熟悉HADOOP大數據平臺架構:HDFS/HBase/Hive/MapReduce,熟練學握Mapeduce程序開發,了解實時計算,有使用過Fink,Spark streaming等開源實時流引擎
4.對數據倉庫系統架構具有良好的認知,理解數據分層、數據傾斜、錯峰調度等理念,并具有相關實戰經驗
附加項(加分項):
1、參與過大型開源項目,尤其是在Flink/Spark、Kafka等引擎方面或者云原生開源項目貢獻過社區代碼;
2、完整參與過企業級數倉建設,或有數倉平臺化的經歷;
3、熟悉java、python等開發語言。