職位描述：

數(shù)據(jù)倉庫工程師

工作職責(zé)：

1.參與或負責(zé)數(shù)據(jù)產(chǎn)品或數(shù)據(jù)倉庫應(yīng)用項目的ETL設(shè)計、開發(fā)、維護及質(zhì)量核查；

2.參與或負責(zé)數(shù)據(jù)倉庫模型的規(guī)劃和設(shè)計，建立并執(zhí)行統(tǒng)一的數(shù)據(jù)開發(fā)規(guī)范；

3.參與或負責(zé)數(shù)據(jù)倉庫基礎(chǔ)設(shè)施和平臺的建設(shè)，搭建教育行業(yè)領(lǐng)域的企業(yè)級數(shù)據(jù)倉庫；

4.和數(shù)據(jù)分析師團隊及其他需求部門進行有效溝通，完成數(shù)據(jù)需求及數(shù)據(jù)問題解決等；

5.完成日常數(shù)據(jù)質(zhì)量的監(jiān)控，跟蹤處理各類數(shù)據(jù)質(zhì)量問題。

職位要求：

1.熟悉主流關(guān)系數(shù)據(jù)庫,熟練SQL開發(fā)，熟悉linux系統(tǒng)、shell編程；

2.精通數(shù)據(jù)倉庫的ETL的開發(fā),有海量數(shù)據(jù)處理相關(guān)經(jīng)驗；

3.熟悉數(shù)據(jù)倉庫領(lǐng)域數(shù)據(jù)模型設(shè)計方法，并有相關(guān)數(shù)倉模型設(shè)計經(jīng)驗；

4.熟悉Hadoop、HIVE、HBase、Kafka、Flume、Spark等開源框架，優(yōu)先考慮；

5.較好的溝通理解能力，性格樂觀，態(tài)度踏實，積極上進。

篇2:數(shù)據(jù)倉庫開發(fā)（高級）工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負責(zé)今日頭條的用戶產(chǎn)品線的數(shù)據(jù)倉庫架構(gòu)設(shè)計、建模和ETL開發(fā)；

2、參與數(shù)據(jù)治理工作，提升數(shù)據(jù)易用性及數(shù)據(jù)質(zhì)量，與數(shù)據(jù)工具團隊緊密合作；

3、理解并合理抽象業(yè)務(wù)需求，發(fā)揮數(shù)據(jù)價值，與業(yè)務(wù)團隊緊密合作。

任職要求：

1、精通數(shù)據(jù)倉庫實施方法論、深入了解數(shù)據(jù)倉庫體系，并支撐過實際業(yè)務(wù)場景；

2、具備較強的編碼能力，熟悉sql，python，hive，spark，kafka，storm中的多項，有至少TB以上級大數(shù)據(jù)處理經(jīng)驗；

3、對數(shù)據(jù)敏感，認真細致，善于從數(shù)據(jù)中發(fā)現(xiàn)疑點；

4、善于溝通，具備優(yōu)秀的技術(shù)與業(yè)務(wù)結(jié)合能力。

篇3:數(shù)據(jù)倉庫開發(fā)工程師Lark職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負責(zé)創(chuàng)新工具核心業(yè)務(wù)模塊數(shù)據(jù)倉庫的構(gòu)建；

2、負責(zé)數(shù)據(jù)模型的設(shè)計，ETL實施、ETL性能優(yōu)化、ETL數(shù)據(jù)監(jiān)控以及一系列技術(shù)問題的解決；

3、負責(zé)構(gòu)建用戶主題、各業(yè)務(wù)線主題、推薦主題、企業(yè)BI門戶系統(tǒng)；

4、負責(zé)全產(chǎn)品線數(shù)據(jù)字典維護，提升數(shù)據(jù)資產(chǎn)質(zhì)量。

任職要求：

1、計算機、數(shù)學(xué)相關(guān)專業(yè)本科及以上學(xué)歷，三年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗，數(shù)據(jù)挖掘和BI分析領(lǐng)域優(yōu)先；

2、熟練掌握Hive/SQL，熟悉Spark/Map-Reduce/MPI分布式計算框架，熟悉大數(shù)據(jù)的離線和實時處理，可以進行海量數(shù)據(jù)模型的設(shè)計、開發(fā)；

3、有產(chǎn)品sense，主動思考基于業(yè)務(wù)場景下的數(shù)據(jù)體系建設(shè)；

4、工作認真，負責(zé)，良好的團隊合作精神和解決問題分析能力。鉆研技術(shù)克服困難，勇于挑戰(zhàn)；

5、有數(shù)據(jù)分析經(jīng)驗優(yōu)先。