數(shù)據(jù)倉庫工程師的崗位職責表述
數(shù)據(jù)倉庫工程師的崗位職責表述
數(shù)據(jù)倉庫工程師負責大數(shù)據(jù)應用類項目的設(shè)計和交付,能獨立和客戶對接業(yè)務,并編寫需求文檔、模型設(shè)計文檔。以下是學習啦小編整理的數(shù)據(jù)倉庫工程師的崗位職責表述。
數(shù)據(jù)倉庫工程師的崗位職責表述1
職責:
1. 利用數(shù)據(jù)倉庫建模及相關(guān)技術(shù),參與數(shù)據(jù)倉庫模型的設(shè)計。
2. 參與企業(yè)級大數(shù)據(jù)倉庫項目的落地開發(fā)。
3. 參與企業(yè)級主數(shù)據(jù)管理項目的實施落地。
4. 利用hadoop生態(tài)相關(guān)技術(shù),負責大數(shù)據(jù)中心的數(shù)據(jù)處理流程,包括數(shù)據(jù)清洗、融合、統(tǒng)計、挖掘等。
任職要求
1. 熟悉數(shù)據(jù)倉庫產(chǎn)品,對數(shù)據(jù)處理、維度建模、數(shù)據(jù)分析等有深刻認識,具備數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計的相關(guān)經(jīng)驗、熟悉數(shù)據(jù)倉庫架構(gòu),熟悉數(shù)據(jù)倉庫項目的實施流程,有一個以上企業(yè)級數(shù)據(jù)倉庫項目設(shè)計經(jīng)驗者優(yōu)先;
2. 熟悉數(shù)據(jù)治理及主數(shù)據(jù)管理的理論知識,掌握主數(shù)據(jù)管理項目的實施方法和落地過程,至少參與過一個主數(shù)據(jù)管理項目的實施落地。
3. 精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數(shù)據(jù)庫,精通SQL;
4. 具備基于Hadoop大數(shù)據(jù)平臺開發(fā)經(jīng)驗,熟悉hadoop生態(tài)體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進行常用的ETL開發(fā)工作;
5. 熟悉常用的數(shù)據(jù)分析及數(shù)據(jù)挖掘方法及實現(xiàn);
6. 具備較強的代碼能力,有較強的數(shù)據(jù)分析能力;具備優(yōu)秀的溝通能力、學習能力;
7. 相關(guān)專業(yè)碩士以上學歷,或本科學歷相關(guān)工作經(jīng)驗超過2年,具有智能制造領(lǐng)域相關(guān)經(jīng)驗或背景者優(yōu)先,能力突出者可適當放寬要求。
數(shù)據(jù)倉庫工程師的崗位職責表述2
職責:
1、負責制定數(shù)據(jù)倉庫平臺技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)及規(guī)范;
2、負責設(shè)計和實施公司業(yè)務數(shù)據(jù)的實時/離線數(shù)據(jù)ETL架構(gòu)方案;
3、負責調(diào)度架構(gòu)設(shè)計與開發(fā);
4、負責數(shù)據(jù)倉庫平臺運維以及日常數(shù)據(jù)運營等管理;
5、負責關(guān)鍵技術(shù)攻關(guān);
崗位要求:
1、計算機、數(shù)學、統(tǒng)計等相關(guān)專業(yè)本科及以上學歷,3年以上數(shù)據(jù)倉庫項目開發(fā)經(jīng)驗,參與過數(shù)據(jù)倉庫架構(gòu)設(shè)計,對ETL開發(fā)流程、調(diào)度架構(gòu)有深入理解;
2、精通mysql等數(shù)據(jù)庫,豐富的SQL性能調(diào)優(yōu)經(jīng)驗;
3、熟練使用Java、Shell等腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師的崗位職責表述3
職責:
1、負責建設(shè)數(shù)據(jù)倉庫架構(gòu),包括元數(shù)據(jù)管理、ETL調(diào)度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設(shè)計和開發(fā);
2、搭建和維護數(shù)據(jù)倉庫表,解決業(yè)務人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;
3、基于對數(shù)據(jù)的理解和業(yè)務需求,對數(shù)據(jù)進行整理、分析和挖掘。
任職資格:
1、做事耐心,有強烈的責任心;
2、計算機,數(shù)學,統(tǒng)計學相關(guān)專業(yè)本科及以上學歷,
3、熟悉主流的關(guān)系型數(shù)據(jù)庫及MPP數(shù)據(jù)庫,至少精通一門數(shù)據(jù)庫,熟悉Gbase優(yōu)先;
4、熟練使用SQL語言,具有2年及以上數(shù)據(jù)倉庫、報表系統(tǒng)等ETL開發(fā)、維護經(jīng)驗;
5、熟悉Hadoop/Spark/Hive/Hbase等大數(shù)據(jù)技術(shù)者優(yōu)先;
6、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
7、有公安相關(guān)業(yè)務經(jīng)驗者優(yōu)先考慮。
數(shù)據(jù)倉庫工程師的崗位職責表述4
職責:
1.負責業(yè)務的數(shù)倉\數(shù)據(jù)集市的建設(shè),能提煉通用需求,數(shù)倉標準,實現(xiàn)高質(zhì)量的數(shù)據(jù)互通共享
2.對海量數(shù)據(jù)進行統(tǒng)計與分析,產(chǎn)品效果評估與分析,為產(chǎn)品策略優(yōu)化迭代提供強有力的數(shù)據(jù)支持
3.和業(yè)務團隊緊密合作推動數(shù)據(jù)產(chǎn)品與服務的落地,具備良好的溝通協(xié)調(diào)能力
任職要求:
1.計算機 數(shù)學 統(tǒng)計, 金融等相關(guān)專業(yè)的本科或以上學歷;從事數(shù)倉領(lǐng)域至少3年以上,具備海量數(shù)據(jù)的DW模型設(shè)計與ETL開發(fā)經(jīng)驗 2.熟悉數(shù)倉領(lǐng)域知識, 包括但不局限于:數(shù)據(jù)質(zhì)量,元數(shù)據(jù)管理,主數(shù)據(jù)管理,數(shù)據(jù)開發(fā)測試工具與方法;
3.掌握Greenplum,Oracle,Teradata,Mysql 等至少一種,靈活運用SQL實現(xiàn)海量數(shù)據(jù)ETL加工處理;有Greenplum經(jīng)驗優(yōu)先
4.具有數(shù)據(jù)倉庫相關(guān)開發(fā)經(jīng)驗,如ETL,建模,BI,數(shù)據(jù)產(chǎn)品等,熟悉數(shù)倉模型
5.掌握一門或多門開發(fā)語言,不限于java/python/scala等,熟悉Linux/Unix 平臺上的開發(fā)環(huán)境
6、主導過大型數(shù)據(jù)倉庫架構(gòu)或模型設(shè)計經(jīng)驗者優(yōu)先;
7、較好的溝通理解能力,性格樂觀,態(tài)度踏實,積極上進;
數(shù)據(jù)倉庫工程師的崗位職責表述5
職責:
1. 負責數(shù)據(jù)ETL開發(fā),根據(jù)數(shù)倉層級結(jié)構(gòu)及主題域劃分,規(guī)范清洗代碼,提供準確數(shù)據(jù)
2. 負責數(shù)據(jù)質(zhì)量治理,發(fā)現(xiàn)異常業(yè)務邏輯或數(shù)據(jù)質(zhì)量問題,推動業(yè)務優(yōu)化及改善。
3. 負責數(shù)據(jù)開發(fā)需求評審、結(jié)合數(shù)據(jù)分析體系制定ETL清洗方案;
任職要求:
1. 一年以上數(shù)據(jù)倉庫ETL設(shè)計及開發(fā)經(jīng)驗,有BI經(jīng)驗者優(yōu)先
2. 熟練使用 SQL,熟悉HQL常用內(nèi)部函數(shù),有一定的 HQL性能調(diào)優(yōu)經(jīng)驗優(yōu)先
3. 具備數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計,調(diào)度的相關(guān)經(jīng)驗優(yōu)先;
4. 對數(shù)據(jù)敏感,有較強數(shù)據(jù)分析和解決問題能力;
5. 積極溝通,主動了解業(yè)務需求,愿意嘗試新的技術(shù)領(lǐng)域。
相關(guān)文章: