職位描述：

崗位職責

1、分析當前和未來大數據、數據治理、數據管理和應用支持等場景的需求，引領相關平臺技術架構的研究和基礎能力建設，主導構建基于大數據智能處理技術的基礎能力平臺；

2、規劃公司大數據、數據智能處理技術等相關領域的技術發展戰略并在產品和平臺層面規劃和領導軟件開發，確定軟件實現架構，推動相關技術落地產品；

3、與其他團隊緊密合作，確保平臺產品的先進性、完整性和競爭力；

4、參加相關趨勢、標準及開源技術生態組織或會議，洞察行業發展趨勢、戰略，確保數據智能技術在大數據領域的持續競爭力

崗位要求

1、碩士/博士學歷，5+年數據技術行業經驗；

2、精通互聯網大型數據應用和處理軟件架構，并具備軟件開發團隊協作管理經驗；

3、能主導團隊成員進行大型項目的設計，架構及落地，主導核心框架、模型的設計與原型開發；

4、在相關重要開源社區活躍或發表論文在業界有一定影響力，在軟件行業組織或開源組織中承擔重要崗位者優先；

5、精通大數據及其處理分析棧技術及工具，如Hadoop/Spark，ELK,Flink，Kafka,Storm等系列組件，具有在數據挖掘和機器學習工具中處理大型數據集的經驗；

6、具備開發和使用傳統數據棧及工具（關系數據庫、數據倉庫、SQL）的開發經驗及有Scala/GO/C++/Java等開發語言及Python、Perl等腳本語言開發經驗；

7、了解虛擬化、容器和PaaS云平臺的技術和開發，如K8s、OpenStack、Ceph等，有開發微服務、無服務架構、面向服務架構、Web服務或數據處理管理經驗者優先

篇2:數據架構師崗位工作職責

1、深入理解MDM主數據管理思想和流程;

2、理解業務數據、主數據與元數據的區別與關系;

3、參與過數據模型的設計與開發;

4、深入理解數據清洗,標準化,轉換,匹配,數據質量、安全管理的原理和業務流程;

5、參與過數據ETL開發與設計;

6、熟練運用主流DBMS,nosql數據庫。

篇3:大數據系統架構師崗位職責大數據系統架構師職責任職要求

大數據系統架構師崗位職責

職責描述:

1.負責客戶業務需求、數據分析需求的調研、收集與分析;

2.負責Kyligence大數據平臺整體架構和數據架構設計,根據具體業務需求和產品對數據模型進行統一分析和規劃;

3.負責技術設計及技術實現規范編制,指導開發團隊進行項目設計、項目實現及技術匯報;

4.負責項目重難點模塊的功能設計和難點攻堅;

5.參與大數據平臺的應用設計、開發、測試及優化工作。

任職要求:

1.計算機相關專業,本科及以上學歷;

2.有5年以上工作經驗,3年以上數據倉庫架構和大數據系統設計經驗;

3.精通Hadoop、Hive、HBase原理及優化,熟悉大數據生態技術圈,如Storm、Spark、Flume、Sqoop、Kafka、Zookeeper、ES等,有大規模集群架構設計、開發及管理經驗;

4.熟練使用SQL語言,掌握Oracle、DB2、GP、MySQL等至少兩種數據庫系統的使用,有較好的SQL性能調優經驗;

5.至少熟悉Java,Scala,Python,Shell等編程語言中的2種;

6.熟悉數據治理及應用,元數據管理的設計與應用;

7.熟悉數據倉庫模型的設計,分層設計原理,并結合大數據技術組建解決模型應用的問題;

8.優秀的分析和解決問題的能力,對挑戰性問題充滿激情;

9.具備良好的文檔撰寫能力和技術團隊管理能力;

10.具備良好的團隊合作精神,較強的溝通能力,具備良好的技術領導能力;

11.有Hive數據倉庫或者ApacheKylin的開發經驗者優先考慮;