大數據技能
1.3年以上數倉開發經驗,3年以上java/scala開發經驗;
2.熟悉hadoop生態相關技術,如HDFS、MR、Hive、Hbase、Spark、Flink等;
3.有較強的Spark開發及調優經驗,對Spark原理有一定的了解;
4.熟悉Hive,有較好的SQL性能調優經驗;
5.對Flink原理有一定的了解,有項目開發和調優經驗。
6.熟悉常用消息隊列及調優,如Kafka、RocketMQ等;
7.有數據湖開發經驗,如Hudi、Iceberg等;
8.有編寫Shell腳本的能力
圖數據庫開發技能
1.熟悉圖庫nebula應用原理,可設計高效、可擴展的圖數據模型(點、邊、標簽、屬性)
2.熟練使用nGQL語言,能進行復雜的數據查詢、遍歷、聚合和更新操作
3.熟悉java后端開發,能進行業務代碼開發,提供對圖數據的讀寫服務接口
4.熟悉spark開發或python語言 或 nebula connector 技術,能對數據進行采集和處理,將業務數據從多種數據源高效、準確地導入到nebula
項目經驗
有追溯類項目經驗優先
形式 獨立顧問(可開發票、自備電腦)
價格 1500元/人天
使用周期 3個月
學歷要求 大專及以上
工作年限 5~8年