資料倉庫工程師崗位的工作職責

　　資料倉庫需要參與公司大資料平臺的建設，包括Sugar報表或神策介面配置，使用者畫像標籤體系的開發等。下面是小編為您精心整理的。

　　1

　　職責：

　　1、參與據倉庫的長期架構規劃，與資料開發，建設共享大資料平臺;

　　2、負責資料平臺相關資料管理工作，如研發規範、質量規範、保障規範的制定與推動實施落地;

　　3、負責來自業務團隊資料需求的研發支撐;

　　4、大規模資料探勘和機器學習演算法的實現和維護;

　　5、線上和離線海量資料分析平臺的開發;

　　6、負責資料倉庫的建設和維護,包括需求調研分析、軟體規劃、概念模型、設計邏輯、物理模型、資料處理***抽取、清洗、轉化***、專案實施管控等;

　　7、負責制定資料接入和採集規範制定。

　　任職要求：

　　1、從事資料倉庫領域工作2年以上;

　　2、熟悉資料建模、ETL設計與應用、報表開發等，並有實際模型設計及ETL開發經驗 ;具有良好的程式設計習慣和文件編寫習慣;

　　3、熟悉資料倉庫領域知識和管理技能，包括但不侷限於：元資料管理、資料質量、效能調優等;

　　4、掌握大型資料庫開發技術，如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種，靈活運用SQL實現海量資料ETL加工處理;

　　5、瞭解大資料基礎架構和平臺 ，具備相關產品***Hadoop、Hive、HBase、Pig、Sqoop、Spark等***專案應用研發經驗，有MapReduce開發的實戰經驗者優先考慮;

　　6、熟悉linux系統;

　　7、熟練掌握python語言;

　　8、熟悉資料視覺化的基本方法，有資料視覺化的開發經驗優先;

　　9、對資料敏感，具有良好的邏輯分析、責任心強、良好的對外溝通和團隊協作能力

　　2

　　職責：

　　1. 負責資料倉庫建設、設計、優化和落地

　　2. 負責資料ETL任務開發及日常維護

　　3. 對資料ETL任務進行效能調優及效能瓶頸分析

　　4. 學習新技術，提高整個平臺的計算能力和效率

　　任職要求：

　　1. 計算機相關專業，全日制本科及以上學歷，2-5年工作經驗

　　2. 熟悉資料倉庫理論基礎，對資料模型建設、應用層建設有比較豐富的經驗

　　3. 熟練使用 SHELL或PYTHON

　　4. 熟悉HADOOP相關的大資料技術：HDFS, MAPREDUCE, HIVE

　　5. 能對HIVE進行效能分析及調優

　　6. 有MAPREDUCE開發經驗優先

　　7. 良好的溝通能力、組織協調能力、應變能力, 極強的責任心、學習能力。

　　3

　　職責：

　　參與資料倉庫模型設計和開發工作;

　　負責建立資料分析模型，設計前端報表，資料視覺化開發;

　　負責資料平臺專案資料倉庫的管理、效能監控及優化等;

　　負責資料平臺的日常運維及優化

　　職位要求：

　　大學本科以上學歷，3年以上工作經驗，包含2年以上資料倉庫開發工作經驗;

　　精通資料倉庫建設，熟悉常用的模型設計方法;

　　對資料視覺化有豐富的經驗，熟悉常用的資料分析方法;熟悉至少一種報表工具開發;

　　精通資料倉庫領域知識和技能，包括元資料管理、主資料管理、資料質量管理等;

　　熟練使用ETL工具如Kettle、SSIS等進行資料清洗、轉換、整合;

　　熟悉至少兩種關係型資料庫，如Oracle、SQL Server、PostgreSQL、MySql等主流資料庫，精通SQL Server開發和運維者優先考慮;

　　有完整的資料平臺建設經驗者優先;

　　熟悉使用Linux系統及Shell指令碼開發，熟練開發Python程式者優先;

　　熟悉大資料開發框架者優先，如Spark，Flink等;

　　對新技術好奇愛學習，主動性和責任心強，對資料敏感，邏輯性強，有良好的抗壓能力;

　　團隊協作能力強

　　4

　　職責：

　　1、基於網際網路行業特點構建企業級資料倉庫架構,建設PB級共享資料平臺;

　　2、負責資料平臺相關資料研發及管理工作，參與制定EDW相關規範並推動實施落地;

　　3、對海量資料處理的相關需求進行評估及方案設計;

　　4、負責資料產品如使用者畫像等模型設計;

　　5、瞭解行業前沿大資料處理方法。

　　任職資格:

　　1、8年以上資料倉庫開發及管理經驗，5年以上網際網路/電商行業經驗;

　　2、精通資料倉庫建設方法論，有大型資料倉庫建設專案經驗***PB級以上***;

　　3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;

　　4、精通HiveSQL，有較豐富的HiveSQL效能調優經驗;

　　5、至少熟練使用Shell、Python、Perl等指令碼語言之一;

　　6、工作認真、負責，有良好的團隊合作精神，良好的分析及溝通能力;

　　5

　　職責：

　　1 負責大資料平臺、資料倉庫多維模型設計

　　2 負責大資料平臺相關生產系統資料的抽取、清洗、轉換等工作

　　3 負責BI平臺設計與報表開發工作

　　崗位要求：

　　1、精通資料倉庫建模理論，有參與過2個以上的資料倉庫建設經驗;

　　2、精通ETL開發，熟悉資料的抽取、常用資料指令碼編寫、儲存過程的編寫;

　　3、熟悉BI平臺，有資料報表設計和開發經驗;

　　4、熟悉SQL，掌握Oracle、PostgreSQL、MySql等至少一種主流關係資料庫;

　　5、具備良好的團隊協作精神，良好的溝通能力;

　　6、供應鏈、物流行業資料從業經歷者優先。