數(shù)據(jù)服務(wù)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1.熟悉Informatica、Kettle等主流ETL開發(fā)工具,有過大型集團(tuán)內(nèi)數(shù)據(jù)治理、整合、清洗的相關(guān)項(xiàng)目經(jīng)驗(yàn);
2.具有數(shù)據(jù)倉庫開發(fā)經(jīng)驗(yàn),熟悉數(shù)據(jù)倉庫系統(tǒng)架構(gòu),熟悉報(bào)表性能調(diào)優(yōu),熟悉數(shù)據(jù)倉庫項(xiàng)目實(shí)施流程;
3.具有良好的溝通表達(dá)及文檔交付能力,踏實(shí)的態(tài)度、較強(qiáng)的團(tuán)隊(duì)協(xié)作;
4.至少熟悉一種關(guān)系型數(shù)據(jù)庫如Oracle、mysql等,熟練掌握Hive/SQL,熟悉Spark/Map-Reduce/MPI分布式計(jì)算框架,進(jìn)行海量數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)ETL開發(fā)、實(shí)時(shí)數(shù)據(jù)處理者優(yōu)先;
崗位職責(zé):
1.主導(dǎo)數(shù)據(jù)倉庫/數(shù)據(jù)集市及BI項(xiàng)目基礎(chǔ)架構(gòu)規(guī)劃、安全規(guī)劃、ETL架構(gòu)和規(guī)范制定;
2.負(fù)責(zé)數(shù)據(jù)倉庫及BI項(xiàng)目ETL部分架構(gòu)的設(shè)計(jì)、開發(fā)和優(yōu)化,并及時(shí)解決ETL相關(guān)技術(shù)問題;
3.海量數(shù)據(jù)的ETL開發(fā),抽取成各種數(shù)據(jù)需求;
4.負(fù)責(zé)數(shù)據(jù)質(zhì)量的檢測和監(jiān)控,形成數(shù)據(jù)反饋優(yōu)化閉環(huán)機(jī)制
篇2:數(shù)據(jù)服務(wù)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、微服務(wù)化架構(gòu)設(shè)計(jì):基于業(yè)界主流技術(shù)、應(yīng)用場景研究和分析,完成現(xiàn)有平臺(tái)的PAAS和SAAS改造,負(fù)責(zé)SaaS層應(yīng)用支撐技術(shù)架構(gòu)研究和建設(shè)、PaaS層服務(wù)組件的搭建、Daas層數(shù)據(jù)服務(wù)架構(gòu)。組織架構(gòu)設(shè)計(jì)團(tuán)隊(duì)完成微服務(wù)化模塊拆分、整體架構(gòu)設(shè)計(jì)、關(guān)鍵微服務(wù)模塊架構(gòu)設(shè)計(jì)。同時(shí),能給予團(tuán)隊(duì)成員微服務(wù)化指導(dǎo);
2、平臺(tái)開發(fā):負(fù)責(zé)系統(tǒng)整體核心代碼開發(fā),制定合理的技術(shù)路線,解決系統(tǒng)建設(shè),開發(fā)效率等問題;
3、數(shù)據(jù)庫開發(fā):負(fù)責(zé)大數(shù)據(jù)相關(guān)數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設(shè)計(jì)以及大數(shù)據(jù)產(chǎn)品研發(fā)工作,并為應(yīng)用開發(fā)團(tuán)隊(duì)提供技術(shù)支持、模型分析;
任職要求:
業(yè)務(wù)技能要求:
1、具有業(yè)界微服化平臺(tái)設(shè)計(jì)、開發(fā)經(jīng)驗(yàn);
2、熟悉業(yè)界主流微服務(wù)化平臺(tái)架構(gòu),能力差異,了解微服務(wù)化平臺(tái)腳骨、能力差異;
3、至少熟悉Oracle、MySQL、MongoDB、DB2、SQLServer等數(shù)據(jù)庫中的一種
4、有電信行業(yè)背景或熟悉電信行業(yè)特點(diǎn)
5、有阿里或騰訊相關(guān)開發(fā)經(jīng)驗(yàn)優(yōu)先;
專業(yè)知識(shí)要求:
1、深入了解JAVA/spring/archalus/zookeeper/Ribbon/Retrofit/Thriftdubbo/Dapper等微服務(wù)化技術(shù)棧協(xié)議;
2、熟悉主流公有云平臺(tái)(Ali、Azure、AWS等)架構(gòu)及技術(shù)特性,熟練掌握Openstack、Docker等云計(jì)算相關(guān)技術(shù),對IaaS、PaaS、SaaS平臺(tái)構(gòu)架有深層次的理解和實(shí)踐經(jīng)驗(yàn);
3、具有豐富的系統(tǒng)分析與架構(gòu)設(shè)計(jì)實(shí)踐經(jīng)驗(yàn),熟悉分布式設(shè)計(jì)開發(fā)高性能、高并發(fā)、高可用性、高擴(kuò)展性系統(tǒng)架構(gòu)設(shè)計(jì);
4、有7年以上的軟件設(shè)計(jì)開發(fā)經(jīng)驗(yàn),對軟件技術(shù)架構(gòu),大數(shù)據(jù)、流計(jì)算、并行計(jì)算有深入的理解,能夠利用相關(guān)知識(shí)指導(dǎo)PAAS/SAAS平臺(tái)的設(shè)計(jì)和開發(fā);
5、理解系統(tǒng)的業(yè)務(wù)需求,主導(dǎo)重大項(xiàng)目的架構(gòu)設(shè)計(jì)和核心模塊設(shè)計(jì),推動(dòng)主要的技術(shù)決策,并最終表達(dá)為軟件架構(gòu);
篇3:大數(shù)據(jù)服務(wù)產(chǎn)品線_Java工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.參與項(xiàng)目及產(chǎn)品研發(fā)工作以及產(chǎn)品相關(guān)文檔編寫
2.項(xiàng)目建設(shè)、產(chǎn)品落地實(shí)施工作;
崗位要求:1.計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷;
2.2年以上Java開發(fā)經(jīng)歷,熟悉Html/CSS/Javascript及Jquery、Spring、HTML編程;
3.熟悉B/S架構(gòu)應(yīng)用系統(tǒng)的開發(fā),掌握eclipse開發(fā)工具;
4.能使用和開發(fā)Mysql數(shù)據(jù)庫系統(tǒng)的編程;
5.精通Spring、ibatis、struts等主流開源框架和技術(shù);
6.熟練使用SVN版本管理工具;
7.具備良好的學(xué)習(xí)能力和抗壓能力,對技術(shù)研究有熱情;
8.熟悉云計(jì)算與與大數(shù)據(jù)信息處理相關(guān)技術(shù)優(yōu)先。
薪資福利:
七險(xiǎn)一金,周末雙休,補(bǔ)充醫(yī)療保險(xiǎn),員工旅游,餐飲補(bǔ)貼,通訊補(bǔ)貼,交通補(bǔ)貼,專業(yè)培訓(xùn),績效獎(jiǎng)金,彈性工作,定期體檢,員工俱樂部活動(dòng)……