可可簡歷網

位置:首頁 > 職責 > 工程師職責

資料運維工程師崗位職責

資料運維工程師是做什麼的?本文提供資料運維工程師的崗位職責例子,包括詳細的工作內容及任職要求。

崗位職責
1、負責大資料環境的部署維護和技術支援;
2、現場系統的問題定位和分析解決;
3、負責應用安全,資料的日常備份和應急恢復;
4、負責大資料外其他日常運維工作。

任職要求:
1、熟悉Linux/Unix系統,兩年以上Linux系統運維或開發經驗;
2、熟練掌握資料庫,有海量資料處理和平行計算平臺運維或開發經驗;
3、有較強的實現能力及學習能力,擁有實際的Hadoop專案經驗;
4、本科及以上學歷,英語四級;
5、良好的團隊合作,較強的溝通能力,強大的解決問題能力。

資料運維工程師崗位職責
工作職責:
1. 負責Hadoop及相關元件的部署和維護,保證其穩定執行;
2. 開發和使用Hadoop大資料自動化運維與監控工具;
3. 基於大資料應用需求,不斷調整和優化Hadoop框架及元件的配置,提升效能;
4. 為資料倉庫、資料探勘建模等資料應用專案提供執行環境支援;

任職要求:
1. 本科及以上學歷,計算機相關專業,2年以上相關工作經驗;
2. 熟悉Linux開發環境和shell指令碼;
3. 熟悉Hadoop及其相關元件部署維護,有實際大資料叢集運維經驗;
4. 熟悉IT系統基礎架構及網路原理,具備大型叢集運維經驗;
5. 熟悉資料倉庫。

崗位職責1.負責企業大資料平臺解決方案的指定、設計、實施、開發、優化2.精通Hadoop生態圈,熟悉HDFS、Spark、Storm、Kylin、Hive、HBase等元件3.負責公司大資料平臺的架構設計、調整、運維工作任職要求1.精通Hadoop生態圈各個工具原理,有一定的hql/sql效能調優工作2.精通java、python、go等語言開發3.對大資料技術棧有一定理解,能夠根據不同場景構建對應的解決方案

崗位職責:


1、負責資料平臺的實時及離線計算的運維管理工作(部署、監控、優化、故障處理);


2.參與資料平臺的相關工具開發(包括自動化部署、關鍵指標監控等)。


3、負責系統的運維與主動預防,搭建監控機制以及時發現叢集問題,持續提升系統可用性與穩定性;


4、跟進並處理系統事件,對系統問題及故障解決跟蹤優化,負責服務狀況與服務質量報告,不斷提升叢集服務質量;


5、梳理優化業務使用叢集的流程及規範,使叢集使用在資源利用、質量等方面均達到較高水平;


6、日常跟蹤業界技術發展動態,並結合業務發展需要,研究引入合適的技術。


任職要求:


1、本科以上學歷,有2年以上Hadoop相關運維經驗,瞭解Hadoop各元件的原理,並有實際部署維護經驗;


2.深入理解linux系統,計算機網路,運維體系結構,精於容量規劃、架構設計、效能優化;


3、熟悉一門以上指令碼語言(shell/perl/python等),熟練掌握自動化運維技術;


4、熟悉docker操作、實施,能通過kuberneter、swarm技術管理docker叢集,熟悉灰度釋出;


5、熟悉hadoop、hive、hbase、yarn、spark等大資料生態圈之元件的原理及運維方式;


6、熟悉資料庫基本原理,能對Mysql進行效能優化,監控Mysql日常執行情況,熟悉主備、主從、安全機制;


7、有敏銳的技術洞察力和較強的問題分析能力,故障排查能力,有很好的技術敏感度和風險識別能力;


8、良好的溝通技巧和推動能力,良好的服務意識和團隊協作意識,細緻周到的做事風格,責任心強;


9、熟悉公有云及架構,如AWS優先考慮。