大數據算法工程師
崗位職責：
1.根據業(yè)務需求開展數據清洗、預處理和特征工程等工作。
2.負責大數據架構的規(guī)劃設計，參與業(yè)務建模及數據化運營平臺的搭建、運維，對業(yè)務流程與大數據的結合提出建議和解決方案。
3.進行數據探索和可視化分析，挖掘數據中的模式、規(guī)則、規(guī)律、趨勢等。
4.從文獻資料或數據庫中提取數據規(guī)律，并依照業(yè)務規(guī)則，設計算法生成模擬數據。
5.探索和引入新的數據挖掘和機器學習技術，提高算法的預測準確性和運行效率。
6.完成基于大數據平臺的業(yè)務項目的開發(fā)、實施和維護工作。
任職資格
1.碩士及以上學歷，大數據/計算機/數學/統(tǒng)計學等相關專業(yè)。
2.熟悉大數據、數據倉庫、湖倉一體、分布式架構技術理論，具備大數據整體系統(tǒng)架構設計和實戰(zhàn)經驗。
3.熟悉大數據組件的開發(fā)編譯、搭建、維護以及性能優(yōu)化。
5.精通Hadoop生態(tài)，在Hive、Hudi、Kudu、Flink、Spark、Presto等大數據技術方面有相關應用經驗，能閱讀源碼跟蹤問題。
6.精通使用相關開發(fā)語言(Java/Python/Scala/Shell等)之一。
7.精通掌握Spark、flink任意一種計算框架，掌握MapReduce計算框架原理，并有實際項目開發(fā)經驗。
8.精通大數據安全組件kerberos、ranger組件搭建及維護、開發(fā)。
9.精通數據挖掘、機器學習和統(tǒng)計學等相關理論，熟悉常用的數據挖掘和機器學習工具和框架，如pandas，numpy，matplotlib, scikit-learn等。
10.具有良好的團隊合作和溝通能力，能夠與團隊成員和其他部門合作推進項目。
上一篇：沒有了
下一篇：市場營銷專員（電氣方向）