崗位職責(zé)：
1、研究各種網(wǎng)頁的數(shù)據(jù)特點和規(guī)律，研發(fā)和優(yōu)化數(shù)據(jù)抽取、清洗算法；
2、根據(jù)項目要求進行維度分析，設(shè)計數(shù)據(jù)采集結(jié)構(gòu)，編寫數(shù)據(jù)采集腳本；
3、選型、優(yōu)化數(shù)據(jù)采集工具，編制數(shù)據(jù)采集、加工、清洗、入庫等完整方案，并執(zhí)行；
4、根據(jù)工作安排，負(fù)責(zé)相關(guān)數(shù)據(jù)的自動化采集、抽取及清洗工作并按時完成交付結(jié)果；
5、維護數(shù)據(jù)增量更新變動及修改，保證數(shù)據(jù)新鮮度及數(shù)據(jù)質(zhì)量；
6、配合研發(fā)部門數(shù)據(jù)應(yīng)用需求。
任職資格：
1、本科及以上學(xué)歷，計算機科學(xué)、數(shù)據(jù)科學(xué)、信息技術(shù)或相關(guān)領(lǐng)域?qū)I(yè)畢業(yè)；
2、具有3年以上數(shù)據(jù)采集和清洗相關(guān)工作經(jīng)驗，有大數(shù)據(jù)處理經(jīng)驗者優(yōu)先；
3、熟悉各種爬蟲框架、數(shù)據(jù)采集工具，熟練使用多線程進行數(shù)據(jù)采集；
4、了解數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計，能夠從結(jié)構(gòu)化和非機構(gòu)化的數(shù)據(jù)中抽取信息；
5、精通Shell腳本、Python或Java等編程；
6、熟悉數(shù)據(jù)存儲技術(shù)，如MySQL、Redis、MongoDB、OceanBase等；
7、責(zé)任心強，具有良好的團隊協(xié)作精神和溝通能力。
薪資福利：
1、月薪：高底薪 + 績效 + 補助；
2、福利：周末雙休、五險一金、話費補助、誤餐補助、交通補助、年終獎金、帶薪年休假、健康體檢、節(jié)日福利、培訓(xùn)學(xué)習(xí)、員工活動；
其他事項：入職集團子公司（安徽標(biāo)信查數(shù)據(jù)技術(shù)有限公司，www.biaoxincha.com），從事軟件開發(fā)與大數(shù)據(jù)業(yè)務(wù)！
工作地址：合肥市高新區(qū)創(chuàng)新大道2800號創(chuàng)新產(chǎn)業(yè)園二期F3棟15樓整層；
****溫馨提示：請應(yīng)聘者認(rèn)真了解任職資格要求，具備條件后方才投遞簡歷，謝謝！！！