職位描述：

職責(zé)描述：

1.依各大數(shù)據(jù)分析項(xiàng)目所需，搭建、研究或規(guī)劃?rùn)C(jī)器學(xué)習(xí)開(kāi)原框架運(yùn)算環(huán)境；

2.設(shè)計(jì)、優(yōu)化、監(jiān)控或維護(hù)自動(dòng)化分析建模作業(yè)流；

3.各大數(shù)據(jù)分析項(xiàng)目布署至內(nèi)云作業(yè)。

任職要求：

1.具備深度學(xué)習(xí)相關(guān)框架(Tensorflow,Theano,Keras等)經(jīng)驗(yàn)2年以上；

2.具備開(kāi)源框架研究及自行搭建之能力；

2.熟悉Linux相關(guān)安裝設(shè)定；

3.具備ETL開(kāi)發(fā)經(jīng)驗(yàn)1年以上；

4.具備hadoop數(shù)據(jù)分析程序開(kāi)發(fā)能力，熟python、java、Spark、shallscript等；

5.有制造業(yè)數(shù)據(jù)收集、處理經(jīng)驗(yàn)尤佳。

篇2:數(shù)據(jù)架構(gòu)師崗位工作職責(zé)

1、深入理解MDM主數(shù)據(jù)管理思想和流程;

2、理解業(yè)務(wù)數(shù)據(jù)、主數(shù)據(jù)與元數(shù)據(jù)的區(qū)別與關(guān)系;

3、參與過(guò)數(shù)據(jù)模型的設(shè)計(jì)與開(kāi)發(fā);

4、深入理解數(shù)據(jù)清洗,標(biāo)準(zhǔn)化,轉(zhuǎn)換,匹配,數(shù)據(jù)質(zhì)量、安全管理的原理和業(yè)務(wù)流程;

5、參與過(guò)數(shù)據(jù)ETL開(kāi)發(fā)與設(shè)計(jì);

6、熟練運(yùn)用主流DBMS,nosql數(shù)據(jù)庫(kù)。

篇3:大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)大數(shù)據(jù)系統(tǒng)架構(gòu)師職責(zé)任職要求

大數(shù)據(jù)系統(tǒng)架構(gòu)師崗位職責(zé)

職責(zé)描述:

1.負(fù)責(zé)客戶(hù)業(yè)務(wù)需求、數(shù)據(jù)分析需求的調(diào)研、收集與分析;

2.負(fù)責(zé)Kyligence大數(shù)據(jù)平臺(tái)整體架構(gòu)和數(shù)據(jù)架構(gòu)設(shè)計(jì),根據(jù)具體業(yè)務(wù)需求和產(chǎn)品對(duì)數(shù)據(jù)模型進(jìn)行統(tǒng)一分析和規(guī)劃;

3.負(fù)責(zé)技術(shù)設(shè)計(jì)及技術(shù)實(shí)現(xiàn)規(guī)范編制,指導(dǎo)開(kāi)發(fā)團(tuán)隊(duì)進(jìn)行項(xiàng)目設(shè)計(jì)、項(xiàng)目實(shí)現(xiàn)及技術(shù)匯報(bào);

4.負(fù)責(zé)項(xiàng)目重難點(diǎn)模塊的功能設(shè)計(jì)和難點(diǎn)攻堅(jiān);

5.參與大數(shù)據(jù)平臺(tái)的應(yīng)用設(shè)計(jì)、開(kāi)發(fā)、測(cè)試及優(yōu)化工作。

任職要求:

1.計(jì)算機(jī)相關(guān)專(zhuān)業(yè),本科及以上學(xué)歷;

2.有5年以上工作經(jīng)驗(yàn),3年以上數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)和大數(shù)據(jù)系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn);

3.精通Hadoop、Hive、HBase原理及優(yōu)化,熟悉大數(shù)據(jù)生態(tài)技術(shù)圈,如Storm、Spark、Flume、Sqoop、Kafka、Zookeeper、ES等,有大規(guī)模集群架構(gòu)設(shè)計(jì)、開(kāi)發(fā)及管理經(jīng)驗(yàn);

4.熟練使用SQL語(yǔ)言,掌握Oracle、DB2、GP、MySQL等至少兩種數(shù)據(jù)庫(kù)系統(tǒng)的使用,有較好的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);

5.至少熟悉Java,Scala,Python,Shell等編程語(yǔ)言中的2種;

6.熟悉數(shù)據(jù)治理及應(yīng)用,元數(shù)據(jù)管理的設(shè)計(jì)與應(yīng)用;

7.熟悉數(shù)據(jù)倉(cāng)庫(kù)模型的設(shè)計(jì),分層設(shè)計(jì)原理,并結(jié)合大數(shù)據(jù)技術(shù)組建解決模型應(yīng)用的問(wèn)題;

8.優(yōu)秀的分析和解決問(wèn)題的能力,對(duì)挑戰(zhàn)性問(wèn)題充滿(mǎn)激情;

9.具備良好的文檔撰寫(xiě)能力和技術(shù)團(tuán)隊(duì)管理能力;

10.具備良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力,具備良好的技術(shù)領(lǐng)導(dǎo)能力;

11.有Hive數(shù)據(jù)倉(cāng)庫(kù)或者ApacheKylin的開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先考慮;