一、崗位招聘要求
1. 基礎條件：本科及以上學歷，軟件工程、數據科學、計算科學、信息管理等相關專業；具備6年以上軟件開發經驗，且擁有3年及以上大數據項目實戰開發經驗，需具備大型數據平臺從0到1搭建的完整項目經驗。
2. 核心架構能力：熟練掌握基于Hadoop/Spark/Flink等生態的企業級大數據平臺架構設計與開發，能獨立負責數據全鏈路（采集、存儲、處理、分析）的方案設計與落地實施。
3. 數據倉庫能力：精通企業級離線與實時數據倉庫的設計規范、分層建模（如星型/雪花模型）及研發全流程，能主導數據倉庫的搭建、優化與迭代工作。
4. 技術工具能力：熟練使用SQL（含HiveQL/Spark SQL等大數據場景SQL）及主流NoSQL數據庫（如HBase、MongoDB）；具備扎實的數據建模能力；掌握容器化部署（Docker/Kubernetes）或BI可視化工具（Tableau、Quick BI等）的使用。
二、崗位工作內容
1. 平臺與架構搭建：主導或核心參與企業級大數據平臺、數據倉庫及數據湖的架構設計與開發工作，負責Hadoop、Spark、Flink等核心組件的選型、部署配置與技術落地。
2. 數據處理全流程管控：設計并搭建高可用的數據采集鏈路，基于Kafka、Flume等組件實現多源異構數據（日志、業務數據庫、第三方接口等）的高效采集；開發、維護核心ETL任務，完成數據清洗、轉換、加載全流程；構建穩定的實時/離線數據處理流水線，支撐業務報表生成、AI建模訓練等核心業務場景，保障數據鏈路的穩定與高效。
3. 數據建模與治理：主導數據倉庫分層架構（ODS/DWD/DWS/ADS）及數據模型的設計與優化；推動企業數據治理體系建設，覆蓋元數據管理、數據血緣追蹤、數據質量監控與告警等核心模塊，確保數據的準確性、一致性、完整性與可追溯性。
4. 系統優化與問題排查：持續監控大數據平臺性能及數據處理任務運行狀態，針對SQL查詢、Spark/Flink作業進行性能調優，解決數據傾斜、任務延遲、資源瓶頸等核心問題；快速響應并處理線上故障（如Executor丟失、Kafka分區異常、數據質量問題等），保障系統7×24小時穩定運行。