職位描述：

職責(zé)描述：

2、負(fù)責(zé)數(shù)據(jù)建模、數(shù)據(jù)預(yù)處理子系統(tǒng)的設(shè)計(jì)和開發(fā)；

3、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)ETL流程的優(yōu)化及解決ETL相關(guān)技術(shù)問題；

4、負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)與業(yè)務(wù)系統(tǒng)的接口設(shè)計(jì)和確認(rèn)工作；

5、負(fù)責(zé)數(shù)據(jù)平臺(tái)相關(guān)的管理工作，如數(shù)據(jù)研發(fā)規(guī)范、數(shù)據(jù)質(zhì)量及穩(wěn)定性保證等建設(shè)；

6、參與公司各個(gè)業(yè)務(wù)線BI、數(shù)據(jù)產(chǎn)品與應(yīng)用的數(shù)據(jù)研發(fā)，挖掘數(shù)據(jù)潛在價(jià)值。

任職要求：

1、統(tǒng)招本一及以上學(xué)歷，碩士2年、本科3年以上開發(fā)經(jīng)驗(yàn)；

2、具有數(shù)據(jù)倉(cāng)庫(kù)構(gòu)建實(shí)施經(jīng)驗(yàn)，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)方法論，并有實(shí)際的模型設(shè)計(jì)經(jīng)驗(yàn)；

3、至少熟悉Oracle、Mysql等數(shù)據(jù)庫(kù)中一種，精通SQL的編寫和優(yōu)化，有存儲(chǔ)過程編寫經(jīng)驗(yàn)；

3、熟悉Hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)實(shí)踐經(jīng)驗(yàn)，包括HDFS，MapReduce，Hive，Hbase，Spark等，具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn)者優(yōu)先；

4、精通數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域知識(shí)和管理技能，包括但不限于：元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能調(diào)優(yōu)等；

5、有較好的溝通交流能力,善于主動(dòng)思考和行動(dòng),樂于解決具有挑戰(zhàn)性的問題。

篇2:大數(shù)據(jù)開發(fā)總監(jiān)崗位職責(zé)大數(shù)據(jù)開發(fā)總監(jiān)職責(zé)任職要求

大數(shù)據(jù)開發(fā)總監(jiān)崗位職責(zé)

大數(shù)據(jù)開發(fā)總監(jiān)主要職責(zé)

1.帶領(lǐng)大數(shù)據(jù)團(tuán)隊(duì),包括數(shù)據(jù)建設(shè)、數(shù)據(jù)質(zhì)量治理、數(shù)據(jù)應(yīng)用和數(shù)據(jù)產(chǎn)品;

2.設(shè)計(jì)并優(yōu)化公司大數(shù)據(jù)架構(gòu),包括數(shù)據(jù)建設(shè)流、數(shù)倉(cāng)模型、數(shù)據(jù)集市架構(gòu);

3.構(gòu)建數(shù)據(jù)質(zhì)量保障體系,包括全流程監(jiān)控、預(yù)警和數(shù)據(jù)快速恢復(fù)、數(shù)據(jù)質(zhì)量評(píng)估

4.完善數(shù)據(jù)應(yīng)用體系,包括數(shù)據(jù)產(chǎn)品構(gòu)建、數(shù)據(jù)分析需求響應(yīng)、數(shù)據(jù)集市

5.數(shù)據(jù)工程架構(gòu)迭代,包括實(shí)時(shí)流、權(quán)限管理、調(diào)度、應(yīng)用輸出等主要職責(zé)

1.帶領(lǐng)大數(shù)據(jù)團(tuán)隊(duì),包括數(shù)據(jù)建設(shè)、數(shù)據(jù)質(zhì)量治理、數(shù)據(jù)應(yīng)用和數(shù)據(jù)產(chǎn)品;

2.設(shè)計(jì)并優(yōu)化公司大數(shù)據(jù)架構(gòu),包括數(shù)據(jù)建設(shè)流、數(shù)倉(cāng)模型、數(shù)據(jù)集市架構(gòu);

3.構(gòu)建數(shù)據(jù)質(zhì)量保障體系,包括全流程監(jiān)控、預(yù)警和數(shù)據(jù)快速恢復(fù)、數(shù)據(jù)質(zhì)量評(píng)估

4.完善數(shù)據(jù)應(yīng)用體系,包括數(shù)據(jù)產(chǎn)品構(gòu)建、數(shù)據(jù)分析需求響應(yīng)、數(shù)據(jù)集市

5.數(shù)據(jù)工程架構(gòu)迭代,包括實(shí)時(shí)流、權(quán)限管理、調(diào)度、應(yīng)用輸出等

篇3:java大數(shù)據(jù)開發(fā)職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1.參與大數(shù)據(jù)平臺(tái)和大數(shù)據(jù)處理框架的架構(gòu)規(guī)劃設(shè)計(jì)；

2.參與數(shù)據(jù)治理工作，提升數(shù)據(jù)易用性及數(shù)據(jù)質(zhì)量；

3.理解并合理抽象業(yè)務(wù)需求，發(fā)揮數(shù)據(jù)價(jià)值，主動(dòng)思考不斷優(yōu)化，與業(yè)務(wù)團(tuán)隊(duì)緊密合作；

4.配合大數(shù)據(jù)負(fù)責(zé)人完成Hadoop、Spark等集群的管理、優(yōu)化和維護(hù)，保證集群規(guī)模持續(xù)、穩(wěn)定。

任職要求：

1.兩年以上相關(guān)工作經(jīng)驗(yàn)；

2.熟練掌握java語(yǔ)言，熟練使用linux,強(qiáng)悍的編碼和處理問題能力；

3.熟悉大數(shù)據(jù)開源棧spark/hadoop、Hive、Hbase、ElasticSearch、kafka、redis,strom/spark-streaming/flink，有至少TB以上級(jí)大數(shù)據(jù)處理經(jīng)驗(yàn).有SparkStreaming的實(shí)時(shí)統(tǒng)計(jì)開發(fā)經(jīng)驗(yàn)優(yōu)先；

4.對(duì)數(shù)據(jù)敏感，認(rèn)真細(xì)致，善于從數(shù)據(jù)中發(fā)現(xiàn)疑點(diǎn)；

5.善于溝通，具備優(yōu)秀的技術(shù)與業(yè)務(wù)結(jié)合能力；

6.學(xué)習(xí)能力強(qiáng)，喜歡研究開源新技術(shù)，有團(tuán)隊(duì)觀念，具備獨(dú)立解決問題的能力