職位描述：

職責描述：

1、負責數(shù)據(jù)分析、加工、清理、處理程序的開發(fā)

2、負責數(shù)據(jù)相關(guān)平臺的搭建、開發(fā)、維護、優(yōu)化

3、分布式平臺應(yīng)用開發(fā)（Hadoop/Spark/Hive/Hbase）

4、開發(fā)數(shù)據(jù)統(tǒng)計系統(tǒng)，各類統(tǒng)計程序報表。

任職要求：

1、2年以上Java或Python開發(fā)工作經(jīng)驗，JAVA基礎(chǔ)扎實；

2、熟悉常見在線與離線大數(shù)據(jù)系統(tǒng),如Hive,HBase,ES,Kafka等的工作原理與開發(fā)調(diào)優(yōu);具有MapReduce開發(fā)經(jīng)驗，有實際大數(shù)據(jù)項目經(jīng)驗；

3、熟練掌握Oracle、MySql等主流數(shù)據(jù)庫上的開發(fā)；

4、具有良好的溝通能力、組織能力及團隊協(xié)作精神，有較強的分析和解決問題的能力.

篇2:中級ETL工程師崗位職責

中級ETL工程師比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚職位描述:

1.負責數(shù)據(jù)倉庫/數(shù)據(jù)集市ETL設(shè)計開發(fā);

2.負責與業(yè)務(wù)部門數(shù)據(jù)需求的溝通與確認;

任職資格:

1.三以上工作經(jīng)驗;

2.熟悉主流ETL開發(fā)工具,如:SSIS、Kettle、Datastage等;

3.熟練掌握主流數(shù)據(jù)庫的使用,如:SQLServer、Mysql、Oracle,對SQL查詢優(yōu)化有豐富的經(jīng)驗;

4.熟悉主流報表工具,如:Tableau、PowerBi、Cognos;

5.良好的溝通技能,清晰的邏輯思維能力;

6.工作認真仔細,積極主動,具備較強的自主學習、自我總結(jié)能力。

篇3:ETL數(shù)據(jù)工程師崗位職責任職要求

ETL數(shù)據(jù)工程師崗位職責

崗位職責:

1.參與金融大數(shù)據(jù)研發(fā);

2.參與數(shù)據(jù)倉庫ETL流程的優(yōu)化及解決ETL相關(guān)技術(shù)問題;

3.負責數(shù)據(jù)基礎(chǔ)架構(gòu)的升級和優(yōu)化,不斷提升系統(tǒng)的穩(wěn)定性和效率;

4.設(shè)計并實現(xiàn)對機器學習、數(shù)據(jù)挖掘的系統(tǒng)性支持;

崗位要求:

1.計算機相關(guān)專業(yè),本科及以上學歷;

2.具備良好的編程習慣,熟悉常用的數(shù)據(jù)結(jié)構(gòu)和算法;

3.熟練掌握PHP/Python/java任一語言;

4.具備良好的數(shù)據(jù)庫理論基礎(chǔ)知識,較強的sql書寫能力,熟練使用MySQL/postgres等數(shù)據(jù)庫;

5.有數(shù)據(jù)處理,ETL流程優(yōu)化實戰(zhàn)經(jīng)驗,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming實時數(shù)據(jù)處理系統(tǒng)建設(shè)經(jīng)驗優(yōu)先。

ETL數(shù)據(jù)工程師崗位