大數(shù)據(jù)運維工程師工作的崗位職責(zé)
大數(shù)據(jù)運維工程師工作的崗位職責(zé)
大數(shù)據(jù)運維工程師需要明確工作范圍,定期與客戶溝通工作量,并獲取客戶回執(zhí),及時歸檔。以下是學(xué)習(xí)啦小編整理的大數(shù)據(jù)運維工程師工作的崗位職責(zé)。
大數(shù)據(jù)運維工程師工作的崗位職責(zé)1
職責(zé):
1、負責(zé)公司大數(shù)據(jù)集群的構(gòu)建,任務(wù)調(diào)度、監(jiān)控預(yù)警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
2、負責(zé)集群容量規(guī)劃、擴容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守,參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計與改進;
3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)自動化運維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運維技術(shù)及發(fā)展方向;
任職要求:
1、熟悉Linux系統(tǒng)及基礎(chǔ)命令操作,能夠獨立編寫Shell或Python腳本,開展日常服務(wù)器的運維工作;
2、熟悉并不限于大數(shù)據(jù)生態(tài)圈Hadoop、Strom、Spark、HDFS、Kafka、Zookeeper、Hbase、Redis、ElasticSearch、fastdfs
等相關(guān)基礎(chǔ)組件的框架知識和運行原理;
3、熟悉軟硬件設(shè)備,網(wǎng)絡(luò)原理,有豐富的大數(shù)據(jù)平臺(CDH、HDP)部署、集群運維和性能優(yōu)化等經(jīng)驗;
4、具備一定的系統(tǒng)自動化運維理論體系和實際經(jīng)驗,能夠利用各種開源監(jiān)控工具、運維工具,HA、負載均衡軟件完成工作任務(wù);
5、具備較強的學(xué)習(xí)能力、抗壓能力、動手能力和分析解決問題的能力;
6、熟悉JVM虛擬機調(diào)優(yōu);
7、熟悉jenkins持續(xù)集成;
8、有一定的文檔編寫能力;
9、能適應(yīng)短期出差,有公安視頻圖像偵查業(yè)務(wù)方向經(jīng)驗者優(yōu)先;
大數(shù)據(jù)運維工程師工作的崗位職責(zé)2
職責(zé):
1.負責(zé)公司大數(shù)據(jù)平臺的運維保障;
2.負責(zé)大數(shù)據(jù)平臺的架構(gòu)審核、業(yè)務(wù)監(jiān)控、持續(xù)交付、應(yīng)急響應(yīng)、容量規(guī)劃等;
3.為線上服務(wù)高效穩(wěn)定運行負責(zé),支撐業(yè)務(wù)和數(shù)據(jù)量的快速擴張;
4.負責(zé)生產(chǎn)及測試集群諸如故障定位恢復(fù)、系統(tǒng)安全、性能優(yōu)化等;
任職要求:
1.計算機相關(guān)專業(yè)本科及以上學(xué)歷,3年以上相關(guān)工作經(jīng)驗
2.精通Hadoop大數(shù)據(jù)生態(tài)圈,熟悉Hadoop各組件的原理,并有實際部署維護經(jīng)驗;包括但不限于HDFS、YARN、Kafka、Spark、HBase、Kerberos、Hive、Kudu、Zookeeper等;
3.具備很強故障排查能力,有很好的技術(shù)敏感度和風(fēng)險識別能力,良好的服務(wù)意識,善于團隊協(xié)作,項目管理,主動思考,自我驅(qū)動力強;
4.有相關(guān)動態(tài)編排容器技術(shù)和虛擬化技術(shù)工作經(jīng)驗者優(yōu)先;
5.深入理解Hadoop各組件的原理和實現(xiàn),有閱讀源碼能力者優(yōu)先;
6.具備很強的ownership,故障排查能力,有很好的技術(shù)敏感度和風(fēng)險識別能力。
大數(shù)據(jù)運維工程師工作的崗位職責(zé)3
1、負責(zé)建設(shè)大數(shù)據(jù)平臺的規(guī)劃、架構(gòu)設(shè)計和技術(shù)選型;
2、開發(fā)和使用Hadoop大數(shù)據(jù)自動化運維與監(jiān)控工具;
3、基于大數(shù)據(jù)應(yīng)用需求,負責(zé)優(yōu)化平臺的性能,消除性能瓶頸,解決業(yè)務(wù)的疑難問題;
4、熟悉Hadoop、Hive、Hbase、Storm、Spark等技術(shù)框架; 熟悉java、scala、sqllite等相關(guān)技術(shù);具備軟件設(shè)計、編碼開發(fā)測試、文檔編寫的能力;
5、積極了解業(yè)界發(fā)展、互聯(lián)網(wǎng)相關(guān)新技術(shù)及趨勢,參與規(guī)劃公司大數(shù)據(jù)產(chǎn)品未來技術(shù)架構(gòu)方向;
6、負責(zé)大數(shù)據(jù)平臺內(nèi)部所涉及到的各類數(shù)據(jù)庫、數(shù)據(jù)存儲的搭建、備份、日常維護、性能調(diào)優(yōu);以及大數(shù)據(jù)平臺系統(tǒng)運維、監(jiān)控和故障分析與處理;
7、能夠很好的和其它團隊的同事溝通協(xié)作;
8、負責(zé)文檔的書寫和完善,保證文檔的及時更新;
9、有大型開源系統(tǒng)維護經(jīng)驗優(yōu)先。
大數(shù)據(jù)運維工程師工作的崗位職責(zé)4
職責(zé)
1、負責(zé)企業(yè)大數(shù)據(jù)平臺的運行監(jiān)控維護,及時發(fā)現(xiàn)并解決平臺故障和數(shù)據(jù)處理異常;
2、負責(zé)大數(shù)據(jù)平臺的數(shù)據(jù)運營,開展數(shù)據(jù)采集和數(shù)據(jù)清洗稽核,保障數(shù)據(jù)質(zhì)量,支撐應(yīng)用開展需要,為數(shù)據(jù)應(yīng)用開發(fā)團隊提供支撐;
3、負責(zé)完善數(shù)據(jù)平臺的運維監(jiān)控和數(shù)據(jù)質(zhì)量保障手段,負責(zé)相應(yīng)運維腳本、數(shù)據(jù)分析腳本的開發(fā)和部署;
4、對數(shù)據(jù)平臺運營情況進行分析和總結(jié),并提出優(yōu)化建議。
應(yīng)聘資格要求
1.2019屆全日制統(tǒng)招應(yīng)屆碩士及以上(特別優(yōu)秀的可放寬至本科)(不含專升本、二級學(xué)院)。
2.英語水平:達到國家四級或四級考試425分以上。
3.身體健康,舉止大方,具備良好的素質(zhì)修養(yǎng)。
4、較強的執(zhí)行能力、組織協(xié)調(diào)能力、學(xué)習(xí)分析能力、溝通協(xié)調(diào)能力及良好的文字表達能力。
5具有較高的企業(yè)忠誠度和良好的道德修養(yǎng),愛崗敬業(yè),有事業(yè)心、責(zé)任心、團隊合作精神。
大數(shù)據(jù)運維工程師工作的崗位職責(zé)5
職責(zé):
1、負責(zé)大數(shù)據(jù)環(huán)境的現(xiàn)場運維和實施。
2、負責(zé)大數(shù)據(jù)環(huán)境的故障分析、問題排除;
3、負責(zé)大數(shù)據(jù)環(huán)境(hadoop生態(tài))集群環(huán)境安裝、維護、部署、優(yōu)化。
任職要求:
1、精通Hadoop生態(tài)圈各個組件原理。
2、具備Hadoop/Kafka/Zookeeper/Spark/Storm/Flume/Hive等集群運維經(jīng)驗者優(yōu)先。
3、熟悉mysql、Oracle等主流數(shù)據(jù)庫
4、熟悉linux操作系統(tǒng)、shell腳本
5、掌握Python/Shell/Java中至少1種開發(fā)語言;
相關(guān)文章: