崗位職責(zé):?
1、參與大數(shù)據(jù)基礎(chǔ)架構(gòu)和技術(shù)體系的規(guī)劃建設(shè),包括數(shù)據(jù)采集平臺、存儲平臺、實時流處理、機器學(xué)習(xí)等方面工作;
2、對系統(tǒng)框架相關(guān)技術(shù)和工具進(jìn)行培訓(xùn),指導(dǎo)開發(fā)人員開發(fā),并解決系統(tǒng)開發(fā)、運行中出現(xiàn)的各種技術(shù)問題;?
3、組織或參與架構(gòu)評審工作,為項目實施過程中的架構(gòu)問題提供建議方案,并制定相應(yīng)規(guī)范
4、較好的溝通能力和自我學(xué)習(xí)能力。
任職要求:?
1、有5年及以上的大數(shù)據(jù)架構(gòu)設(shè)計和開發(fā)經(jīng)驗;?
2、豐富的開發(fā)實踐、熱愛技術(shù)、精通數(shù)據(jù)倉庫建模及ETL設(shè)計開發(fā);有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗;?
3、熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖掘;?
4、對大數(shù)據(jù)基礎(chǔ)架構(gòu)和平臺有深刻理解,掌握Hive、Hbase、Spark、Streaming、Storm、Flink、es等至少四種數(shù)據(jù)處理核心組件;?
5、大數(shù)據(jù)企業(yè)從事大數(shù)據(jù)架構(gòu)開發(fā)設(shè)計者、或有機器學(xué)習(xí)項目經(jīng)驗者優(yōu)先考慮;
6、有中級或者高級職稱的優(yōu)先考慮。