數據倉庫工程師的具體職責文本
數據倉庫工程師的具體職責文本
數據倉庫工程師需要完善和梳理數據指標體系,完成和維護數據字典的工作。以下是學習啦小編整理的數據倉庫工程師的具體職責文本。
數據倉庫工程師的具體職責文本1
Responsibility
1、負責建設數據倉庫架構,包括元數據管理、ETL調度、數據集成、OLAP等子系統的設計和開發;
2、制定和推廣數據字典,建立完善的元數據管理規范,負責數據質量監控設計;
3、搭建和維護數據倉庫表,解決業務人員在倉庫系統流程、工具使用、數據處理等遇到的問題;
4、深入了解網易游戲、CC直播、藏寶閣、網易大神等業務,負責數據倉庫和其它業務系統接口。
5、基于對數據的理解和業務需求,對數據進行整理、分析和用戶畫像搭建。
Requirements
1、計算機相關專業本科及以上學歷,有2年以上數據倉庫、ETL工作經驗;
2、熟悉SQL、Shell等相關技術,有海量數據處理、ETL及任務調度優化、數據倉庫建模等經驗;
3、熟悉Linux環境,了解Java/Python服務端系統開發;
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數據技術者優先;
5、邏輯清晰、對數據敏感,良好的溝通能力和協作能力,敢于接受挑戰,能夠承受壓力;
數據倉庫工程師的具體職責文本2
職責:
1、學習并理解勵步云學***業務及系統,根據業務部門需求對公司各項業務數據進行統計分析,出具相關報表;
2、進行數據倉庫設計、模型開發、數據質量校驗,報表開發;
3、進行數據差異分析,找出統計口徑、數據錯誤、操作錯誤等造成的差異原因;
4、進行數據查詢優化,解決跑數性能問題。
任職資格:
1、本科以上學歷,數學、統計、計算機相關專業優先;
2、3年以上互聯網相關行業數據開發經驗;
3、精通數據倉庫建設思路,并有相關實施經驗,特別是通用匯總層建設經驗;
4、較強的數據開發能力,熟悉Hadoop相關技術,深刻理解MapReduce原理和過程;
5、精通Hive SQL,進行數據處理及模型開發;
6、有較強的學習能力,能快速學習和理解業務知識及數據需求;
數據倉庫工程師的具體職責文本3
職責:
1、負責數據倉庫(HADOOP)ETL工作以及數據運營;
2、負責數據產品的業務需求梳理、數據開發以及維護;
3、負責數據倉庫的維度建模以及設計相關的腳本調度;
4、負責維度模型的數據處理的腳本開發,程序開發以及接口對接。
職位要求:
1. 本科以上學歷,信息管理、計算機相關專業,兩年以上ETL、數據倉庫和大數據相關經驗;
2. 熟悉數據倉庫架構,了解HADOOP等大數據平臺;
3. 有ORACLE\DB2等大型的數據倉庫的開發經驗;
4. 能夠用HIVE的SQL,HADOOP的MAPREDUCE和SPARK去處理數據;
5. 熟悉關系數據庫,并有HIVE的SQL的開發經驗;
6. 熟悉Linux的shell編程;
7. 有銀行和運營商相關的大數據或者數據倉庫相關經驗的優先
8. 熱愛技術工作,具有較強的團隊協作意識,數據安全意識;
9. 工作嚴謹、責任心強,能承受工作壓力。
數據倉庫工程師的具體職責文本4
職責:
1、負責大數據平臺搭建及數據倉庫建模;
2、負責數據庫管理及數據優化;
3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作;
4、維護大數據平臺并能解決相關問題, 保障平臺正常運行;
5、學習和研究新技術以滿足系統需求。
任職資格:
1、本科及以上學歷,計算機、通信等相關專業;
2、有相關工作經驗者優先;
3、對互聯網產品有見解,關注前沿技術,有較強的學習能力、分析能力和動手能力;
4、熟悉Linux操作系統及ORACLE、MySQL及MongoDB等數據庫,了解SQL優化,熟悉ER模型和相關數據建模技術,能夠熟練使用Java或Python、SHELL;
5、熟悉Hadoop的體系架構和運行原理,有大數據處理方面經驗
6、具有大型數據倉庫和ETL開發、HIVE經驗優先
7、個性樂觀開朗,溝通能力強,具備良好的團隊協作精神,能利用自身技術能力提升團隊整體研發效率。
數據倉庫工程師的具體職責文本5
職責:
1、參與數據倉庫建設,負責數據倉庫模型設計;
2、開發高質量可擴展的底層數據倉庫體系;
3、負責數據倉庫系統與業務系統的接口設計和確認工作;
4、負責數據平臺相關的管理工作,如數據研發規范、數據質量及穩定性保證等建設;
5、參與公司各個業務線BI、數據產品與應用的數據研發,發覺數據潛在價值。
崗位要求:
1.大學本科及以上學歷,計算機、經濟、金融、數學專業背景,有3年以上工作經驗;
2.熟悉數據倉庫建模理論,以及數倉數據層級關系,具備大型數倉邏輯模型和物理模型設計經驗;
3.熟悉一種ETL開發工具(sqoop,datax等), 熟悉ETL開發實施流程和原理;
4.掌握CDH版的hadoop環境,掌握hiveQL,有調優經驗;
5.有一定的編程語言基礎,不限制于java,python,shell等;
6.有元數據管理、數據質量管理工作經驗的優先考慮;
7.工作認真,負責,仔細,有良好的團隊合作精神。
相關文章: