高級ETL工程師職責描述:

1.負責基于Spark技術的海量數據處理和建設工作;

2.參與流式數據處理系統的開發和維護;

3.協同數據采集團隊和數據應用團隊進行系統和代碼間對接;

4.跟蹤新的大數據處理技術,并將新的大數據處理技術應用到醫療業務場景中;

任職要求:

1.計算機軟件相關專業,本科以上學歷

2.兩年及以上spark相關開發經驗

3.熟練掌握java,Scala,Python,C++語言中的一種

4.熟悉Linux/Unix操作系統

5.熟悉MySQL/Hbase/Hive/Kafka/ElasticSearch/Redis中一種或多種技術

6.扎實的數據結構及算法基礎,良好的英文文檔閱讀能力

7.思路敏捷清晰,良好的語言表達和理解能力,良好的學習能力及創新意識

8.具有優良的問題分析及解決能力

9.具有良好的團隊合作精神及協調能力

職責描述:

1.負責基于Spark技術的海量數據處理和建設工作;

2.參與流式數據處理系統的開發和維護;

3.協同數據采集團隊和數據應用團隊進行系統和代碼間對接;

4.跟蹤新的大數據處理技術,并將新的大數據處理技術應用到醫療業務場景中;

任職要求:

1.計算機軟件相關專業,本科以上學歷

2.兩年及以上spark相關開發經驗

3.熟練掌握java,Scala,Python,C++語言中的一種

4.熟悉Linux/Unix操作系統

5.熟悉MySQL/Hbase/Hive/Kafka/ElasticSearch/Redis中一種或多種技術

6.扎實的數據結構及算法基礎,良好的英文文檔閱讀能力

7.思路敏捷清晰,良好的語言表達和理解能力,良好的學習能力及創新意識

8.具有優良的問題分析及解決能力

9.具有良好的團隊合作精神及協調能力

篇2:中級ETL工程師崗位職責

中級ETL工程師比孚科技上海比孚信息科技有限公司,比孚,比孚科技,比孚職位描述:

1.負責數據倉庫/數據集市ETL設計開發;

2.負責與業務部門數據需求的溝通與確認;

任職資格:

1.三以上工作經驗;

2.熟悉主流ETL開發工具,如:SSIS、Kettle、Datastage等;

3.熟練掌握主流數據庫的使用,如:SQLServer、Mysql、Oracle,對SQL查詢優化有豐富的經驗;

4.熟悉主流報表工具,如:Tableau、PowerBi、Cognos;

5.良好的溝通技能,清晰的邏輯思維能力;

6.工作認真仔細,積極主動,具備較強的自主學習、自我總結能力。

篇3:ETL數據工程師崗位職責任職要求

ETL數據工程師崗位職責

崗位職責:

1.參與金融大數據研發;

2.參與數據倉庫ETL流程的優化及解決ETL相關技術問題;

3.負責數據基礎架構的升級和優化,不斷提升系統的穩定性和效率;

4.設計并實現對機器學習、數據挖掘的系統性支持;

崗位要求:

1.計算機相關專業,本科及以上學歷;

2.具備良好的編程習慣,熟悉常用的數據結構和算法;

3.熟練掌握PHP/Python/java任一語言;

4.具備良好的數據庫理論基礎知識,較強的sql書寫能力,熟練使用MySQL/postgres等數據庫;

5.有數據處理,ETL流程優化實戰經驗,熟悉kettle/informatica等抽取工具;

6.有使用kafka,storm,sparkstreaming實時數據處理系統建設經驗優先。

ETL數據工程師崗位