Hadoop研發工程師崗位職責

Hadoop研發工程師是做什麼的?本文提供Hadoop研發工程師的崗位職責例子,包括詳細的工作內容及任職要求。崗位職責：
1、負責資料倉庫架構設計與研發；
2、負責大資料產品的資料研發；
3、助力資料化運營業務，與演算法同學配合構建豐富多樣的BI應用。

任職要求：
1、有從事分散式資料儲存與計算平臺應用開發經驗，熟悉Hadoop生態相關技術並有相關開發經驗，有Spark/Flink的開發經驗尤佳；
2、較為豐富的資料倉庫及資料平臺的架構經驗，精通資料倉庫建模及ETL設計開發；有較為系統的海量資料效能處理經驗；在大資料資產管理與治理有一定成功產品化經驗；
3、具備一定的JAVA、Python語言的開發能力，具備機器學習演算法能力尤佳；
4、 良好的思維邏輯性、語言表達能力；有較好英語口語能力，將安排海外崗位。崗位職責：
1. 基於Hadoop、Spark、Hive、kettle等大資料計算平臺的架構構建，資料平臺架構設計、開發分散式計算業務，專注於實時計算、即時計算、流式計算，大資料應用、資料探勘、分析建模等技術;
2. 參與分析視覺化、資料視覺化、資料展現工具、創新資料業務等技術的研發;
3. 對Hadoop、Spark、Hive、Impala、Hue、Hbase、Map/Reduce相關產品進行預研、開發;
4. 攻克各種分散式、高併發、大容量、資料隔離、系統解耦等方面的技術難關;
5. Hadoop相關業務指令碼的效能優化與提升，不斷提高系統執行效率，確保大資料計算平臺的效能和穩定性 ;
任職要求：
1. 精通Hadoop、Spark、Hive、Sqoop、Map/Reduce;
2. 熟悉Hbase Impala、Hue 等相關技術;
3. 熟練使用Python、Shell、kettle語言及開發工具;
4. 熟練使用MSSQL,Oracle,MySQL;
5. 三年以上工作經驗;
6. 對大資料分析有自己的獨到見解，具備大資料分析的思路;職位描述：
崗位職責：
1、負責hadoop平臺上的資料儲存，資料維護和優化；
2、參與大規模資料系統的架構設計和開發；
3、大規模資料探勘和機器學習演算法的實現和維護；
4、線上和離線海量資料分析平臺的開發。

崗位要求：
1、計算機及相關專業統招本科及以上學歷；
2、2年以上hadoop的應用開發經驗，至少一個企業級資料倉庫專案開發經驗或大資料處理專案經驗；
3、優秀的程式設計開發能力，精通Java，並熟悉python、shell、perl中的一種；
4、對資料結構、演算法有深刻理解，有預測模型，行為分析模型，推薦模型具體實施經驗者優先；
5、熟悉hadoop生態圈中的hive、impala、kafka、flume等，對hive、impala開發有實際經驗者優先；
6.、對新技術敏感，有一定獨立分析，技術研究能力，樂於接受挑戰，具有良好的團隊合作精神。崗位職責：
1、負責Hadoop、Spark、Storm、Kafka等開源大資料產品元件的二次開發；
2、負責Hadoop等大資料產品與神通MPP叢集大資料產品的整合。
3、跟蹤大資料應用動向和主流開源產品新特徵，創新產品應用；
職位要求：
1、計算機相關專業、研究生及以上學歷。
2、熟悉Java或Scala開發語言
3、研究過Hadoop、Spark、Hive、Storm、ES等任意一種大資料開源系統是一個很好的加分項。
4、至少熟練使用Shell、Perl、Python等一種指令碼語言。