崗位職責:
1、負責大數據項目開發,使用大數據組件進行開發、部署與代碼優化;
2、設計與管理數據倉庫,并根據業務需求進行數據查詢分析與可視化;
3、理解業務流程,對關鍵商業指標進行計算,對業務數據進行探索分析;
4、使用機器學習算法進行數據建模,提升商家數據決策能力。
?
崗位要求:
1、本科及以上學歷,數理相關專業,三年或以上數據開發經驗;
2、熟練掌握Python語言開發,熟悉Pandas,PySpark,Scikit-learn,Scipy,Statsmodels等多個數據分析庫;
3、熟練SQL語法和MySql等關系型數據庫使用,熟悉Redis等鍵值數據庫;
4、熟練使用多種大數據組件,包括但不限于Hive,HBase,Spark,ClickHouse,Kafka等;
5、了解數據倉庫建模理論、模型設計、ETL設計思路,具備OLAP查詢相關經驗。
以下為加分項:
1、有機器學習算法項目(分類聚類、協同過濾、文本挖掘、時間序列預測等)經驗,
???熟悉一種或多種機器學習工具(SparkML,Scikit-learn,TensorFlow,Pytorch)優先;
2、有后端接口開發經驗、對接口設計、GRPC通訊協議有一定理解;
3、有數據倉庫建模經驗,對零售等業態數據倉庫有一定理解,或有電商BI背景優先;
4、有推薦系統、用戶畫像、多維分析報表等開發經驗優先;
5、有Docker容器化部署,?CDH搭建與維護經驗優先。