崗位職責
1. 參與大數據平臺核心模塊的設計、開發與優化,基于Java技術棧構建高可用、高并發的數據處理系統;
2. 負責海量數據的采集、清洗、存儲、計算及可視化全流程實現,解決數據處理中的性能瓶頸;
3. 主導或參與數據中間件的選型、部署與二次開發,保障數據流轉的高效與穩定;
4. 與產品、數據分析團隊協作,理解業務需求并轉化為技術方案,支撐數據驅動決策;
5. 負責技術文檔編寫、代碼評審及團隊技術分享,提升團隊整體技術水平。
任職要求
1. 本科及以上學歷,計算機、大數據、軟件工程等相關專業,5年以上Java后端開發經驗,其中至少1年大數據項目實戰經驗;
2. 精通Java基礎語法、集合框架、并發編程,熟悉Spring Boot、Spring Cloud等微服務框架;
3. 熟悉大數據生態核心組件,包括但不限于Hadoop(HDFS、MapReduce)、Spark、Flink、Hive、HBase、Kafka、Redis等,能獨立完成相關組件的部署、調優與問題排查;
4. 掌握數據同步工具(Sqoop、DataX、Flink CDC等)、數據倉庫設計理念,具備海量數據處理及性能優化經驗;
5. 熟悉MySQL、PostgreSQL等關系型數據庫,具備SQL優化能力;了解MongoDB等非關系型數據庫優先;
6. 具備良好的技術視野、問題分析能力和溝通協作能力,能承受一定的項目壓力,有大型分布式系統開發經驗者優先。