首頁 > 職責(zé)大全 > hive崗位工作職責(zé)

hive崗位工作職責(zé)

2024-07-12 閱讀 7844

簡介:hive是基于Hadoop的一個數(shù)據(jù)倉庫工具,可以將結(jié)構(gòu)化的數(shù)據(jù)文件映射為一張數(shù)據(jù)庫表,并提供簡單的sql查詢功能,可以將sql語句轉(zhuǎn)換為MapReduce任務(wù)進(jìn)行運(yùn)行。其優(yōu)點(diǎn)是學(xué)習(xí)成本低,可以通過類SQL語句快速實(shí)現(xiàn)簡單的MapReduce統(tǒng)計(jì),不必開發(fā)專門的MapReduce應(yīng)用,十分適合數(shù)據(jù)倉庫的統(tǒng)計(jì)分析。

hive職位描述(模板一)

崗位職責(zé):

1、理解業(yè)務(wù),基于大數(shù)據(jù)平臺,開發(fā)和維護(hù)數(shù)據(jù)倉庫相關(guān),對業(yè)務(wù)需求部門進(jìn)行數(shù)據(jù)支持;

2、根據(jù)業(yè)務(wù)部門需求,充分利用現(xiàn)有數(shù)據(jù)資源,進(jìn)行數(shù)據(jù)提取、整理和挖掘(ETL);

3、深入了解業(yè)務(wù),從數(shù)據(jù)層面發(fā)現(xiàn)業(yè)務(wù)和系統(tǒng)方面的問題,并支持解決;

4、建立及優(yōu)化和維護(hù)?數(shù)據(jù)平臺數(shù)據(jù)倉庫,與數(shù)據(jù)產(chǎn)品經(jīng)理一起,解決數(shù)據(jù)準(zhǔn)確性、計(jì)算穩(wěn)定性相關(guān)的技術(shù)問題。

任職要求:

1、熟悉數(shù)據(jù)倉庫方法論、理解維度建模,有ETL相關(guān)開發(fā)工作經(jīng)驗(yàn);

2、熟悉數(shù)據(jù)倉庫開發(fā)流程,數(shù)據(jù)冷熱分離,熟悉數(shù)據(jù)倉庫(DW)/商業(yè)智能(BI)的數(shù)據(jù)框架;

3、熟悉?數(shù)據(jù)平臺及數(shù)據(jù)倉庫?具,數(shù)據(jù)同步工具;

4、熟悉hadoop生態(tài),Hive及相關(guān)hql,ETL等工作;

5、踏實(shí)、細(xì)心、認(rèn)真,有責(zé)任心,良好的團(tuán)隊(duì)協(xié)作,樂于溝通交流和分享。

hive職位描述(模板二)

崗位職責(zé):

1、負(fù)責(zé)在Spark計(jì)算平臺上開發(fā)金融業(yè)務(wù)所需的數(shù)據(jù);

2、負(fù)責(zé)Spark任務(wù)的維護(hù)和支持。

任職要求:

1、計(jì)算機(jī)相關(guān)專業(yè),本科學(xué)歷以上,至少2年工作經(jīng)驗(yàn);

2、熟悉Java或Scala;

3、熟悉Spark開發(fā),從事過至少一個完整的Spark項(xiàng)目;

4、自我驅(qū)動,自主學(xué)習(xí)新的技術(shù)和分析方法,并勇于在業(yè)務(wù)上進(jìn)行創(chuàng)新。

hive職位描述(模板三)

崗位職責(zé):

1、參與相關(guān)項(xiàng)目的需求分析、方案設(shè)計(jì);

2、參與數(shù)據(jù)倉庫模型設(shè)計(jì)和OLAP模型設(shè)計(jì);

3、負(fù)責(zé)相關(guān)項(xiàng)目的數(shù)據(jù)處理ETL過程的設(shè)計(jì)與實(shí)現(xiàn);

4、負(fù)責(zé)對業(yè)務(wù)需求部門進(jìn)行數(shù)據(jù)支持;

5、根據(jù)需求,進(jìn)行數(shù)據(jù)庫、數(shù)據(jù)倉庫方面的技術(shù)支持。

任職要求:

1、本科以上學(xué)歷,2年以上數(shù)據(jù)倉庫或者ETL開發(fā)經(jīng)驗(yàn);

2、熟悉主流數(shù)據(jù)庫Oracle、DB2、SQLServer、mysql等數(shù)據(jù)庫中一種,熟練掌握SQL語句編程;

3、熟悉數(shù)據(jù)倉庫架構(gòu)及原理,能進(jìn)行數(shù)據(jù)倉庫數(shù)據(jù)模型的設(shè)計(jì),開發(fā);

4、熟練編寫存儲過程;

5、熟悉Hadoop,有過Hive開發(fā)經(jīng)驗(yàn);

6、具有良好的溝通表達(dá)能力、具有良好的文檔編寫能力,有較強(qiáng)的獨(dú)立工作能力和解決問題的能力;

7、有互聯(lián)網(wǎng)電商或零售行業(yè)業(yè)務(wù)經(jīng)驗(yàn),元數(shù)據(jù)管理,數(shù)據(jù)質(zhì)量管理經(jīng)驗(yàn)者優(yōu)先。

hive職位描述(模板四)

崗位職責(zé):

1、參與基于hadoop的數(shù)據(jù)計(jì)算平臺建設(shè),支持精準(zhǔn)廣告投放所需的大規(guī)模數(shù)據(jù)計(jì)算需求;

2、大數(shù)據(jù)應(yīng)用相關(guān)解決方案的設(shè)計(jì),以及相關(guān)軟件應(yīng)用技術(shù)疑難問題的研究工作;

3、基于DMP平臺,處理每日T級以上的大數(shù)據(jù)分析;

4、針對具體業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)的離線計(jì)算或?qū)崟r計(jì)算。

任職要求:

1、計(jì)算機(jī)相關(guān)專業(yè),本科及以上學(xué)歷,3年以上Hadoop相關(guān)開發(fā)/維護(hù)經(jīng)驗(yàn);

2、熟悉Hadoop/HBase/Spark/hive生態(tài)系統(tǒng)的搭建和管理,掌握相關(guān)項(xiàng)目的原理和使用方法;

3、掌握數(shù)據(jù)分析的基本流程,擅長數(shù)據(jù)采集、清洗、分析等環(huán)節(jié);

4、具有較強(qiáng)的業(yè)務(wù)理解能力,并能快速應(yīng)用于數(shù)據(jù)分析各階段;

5、善于發(fā)現(xiàn)系統(tǒng)的性能瓶頸、設(shè)計(jì)缺陷,提出改進(jìn)方案并進(jìn)行實(shí)施;

6、思路敏捷清晰,良好的表達(dá)和理解能力,良好的學(xué)習(xí)能力,強(qiáng)烈的創(chuàng)新意識;

7、有互聯(lián)網(wǎng)廣告行業(yè)工作經(jīng)歷者優(yōu)先考慮。

hive職位描述(模板五)

崗位職責(zé):

1、參與公司大數(shù)據(jù)產(chǎn)品規(guī)劃,大數(shù)據(jù)處理分析平臺的設(shè)計(jì);

2、負(fù)責(zé)數(shù)據(jù)分析、加工、清理、處理程序的開發(fā);

3、負(fù)責(zé)數(shù)據(jù)相關(guān)平臺的搭建、維護(hù)和優(yōu)化。

任職要求:

1、計(jì)算機(jī)相關(guān)專業(yè)本科學(xué)歷以上;

2、5+年以上相關(guān)大數(shù)據(jù)工作經(jīng)驗(yàn);

3、熟悉Hadoop、Hbase、Hive、Spark集群搭建維護(hù)、優(yōu)化及異常問題解決;

4、能夠發(fā)現(xiàn)系統(tǒng)性能瓶頸,并能對IO、網(wǎng)絡(luò)通訊、任務(wù)調(diào)度調(diào)優(yōu);

5、熟悉Java和Scala語言、熟悉常用設(shè)計(jì)模式、具有代碼重構(gòu)意識;

6、使用SparkStreaming和SparkSQL進(jìn)行數(shù)據(jù)處理,并具有SPARKSQL優(yōu)化經(jīng)驗(yàn);

7、熟悉MySQL數(shù)據(jù)庫性能優(yōu)化方法,了解常見NO-SQL數(shù)據(jù)庫;

8、有數(shù)據(jù)挖掘、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)研發(fā)實(shí)踐經(jīng)驗(yàn)者優(yōu)先。

篇2:ETLHive崗位職責(zé)

大客戶經(jīng)理(離岸財(cái)富規(guī)劃)EMPRIVATEWEALTHLIMITEDEMPRIVATEWEALTHLIMITED1、負(fù)責(zé)開發(fā)拓展高凈值客戶資源,挖掘客戶的財(cái)富管理需求,為客戶制訂合適的境外資產(chǎn)配置方案;

2、維護(hù)好客戶關(guān)系,及時向客戶更新財(cái)富管理市場的信息,并提供專業(yè)的投資建議;

3、完成月度及年度對應(yīng)的業(yè)績目標(biāo),與客戶進(jìn)行商務(wù)談判并推進(jìn)合同簽訂;

4、根據(jù)一線工作了解到的客戶反饋,向業(yè)務(wù)管理者提出流程優(yōu)化等建議;

5、配合公司的其它活動,如主題說明會、高端沙龍等。

任職要求:

1、本科或以上學(xué)歷,金融、銀行、管理、市場營銷類相關(guān)專業(yè)者優(yōu)先;

2、5年以上高凈值客戶開拓與服務(wù)經(jīng)驗(yàn),有私人銀行工作經(jīng)驗(yàn)者優(yōu)先;

3、有較強(qiáng)的社會關(guān)系網(wǎng)絡(luò)和客戶人脈資源,且具備開發(fā)和維護(hù)大客戶經(jīng)驗(yàn)者優(yōu)先;

4、具有敏銳的市場洞察力和準(zhǔn)確客戶分析能力,能夠效開發(fā)資源;

5、成熟穩(wěn)重、誠實(shí)合規(guī)、勤奮努力,具有高度的團(tuán)隊(duì)合作精神與工作熱情;

6、有強(qiáng)烈的創(chuàng)業(yè)意識,愿與公司一同成長。

篇3:油品調(diào)運(yùn)分公司財(cái)務(wù)室部門職責(zé)

油品調(diào)運(yùn)分公司財(cái)務(wù)室部門職責(zé)

部門名稱、財(cái)務(wù)室、部門定編、/、

直接上級、公司分管領(lǐng)導(dǎo)、下屬部門、/、

部門主要職能:、負(fù)責(zé)統(tǒng)計(jì)核算與結(jié)算管理、會計(jì)核算、資金管理、稅務(wù)管理、預(yù)算管理、資產(chǎn)管理、財(cái)務(wù)分析等工作、

序號、職能領(lǐng)域、主要職責(zé)、

1、統(tǒng)計(jì)核算與結(jié)算管理、

負(fù)責(zé)每月接收LNG、永煉、榆煉站臺賬及單據(jù)、整理臺賬、核算臺賬,確認(rèn)數(shù)據(jù)的準(zhǔn)確性

負(fù)責(zé)每月與各煉廠、承運(yùn)商的賬務(wù)核對工作,核對中存在差異,應(yīng)尋找原因并解決,確保每月的結(jié)算工作順利進(jìn)行

負(fù)責(zé)每月接收承運(yùn)商、單位內(nèi)部業(yè)務(wù)中所開具的增值稅專用發(fā)票

開具的增值稅發(fā)票、負(fù)責(zé)為各煉廠及LNG客戶開具增值稅發(fā)票,負(fù)責(zé)每月去各煉廠的掛賬工作

負(fù)責(zé)合作單車掛靠費(fèi)用的核對和結(jié)算工作

負(fù)責(zé)本部門保密管理的相關(guān)工作、

2、會計(jì)核算、

負(fù)責(zé)分公司各項(xiàng)經(jīng)濟(jì)業(yè)務(wù)的核算,在附件齊全、審批完善的條件下編制記賬憑證

負(fù)責(zé)登記分公司各類明細(xì)賬與總賬

負(fù)責(zé)預(yù)算控制線上審核

負(fù)責(zé)公司應(yīng)收應(yīng)付款項(xiàng)的清理結(jié)算工作

負(fù)責(zé)編制分公司會計(jì)報(bào)表,編寫會計(jì)報(bào)表附注,進(jìn)行分公司財(cái)務(wù)報(bào)表分析

負(fù)責(zé)分公司可變費(fèi)用預(yù)算執(zhí)行匯總分析

監(jiān)督分公司財(cái)務(wù)運(yùn)行情況,做到賬賬、賬實(shí)、賬證相符

配合政府部門、上級主管部門及審計(jì)機(jī)構(gòu)做好財(cái)務(wù)審計(jì)、檢查工作、

3、資金管理、

負(fù)責(zé)每日確認(rèn)客戶賬戶資金余額,通知客戶及時付款

負(fù)責(zé)資金安全管理

負(fù)責(zé)按照公司要求執(zhí)行分公司的開關(guān)戶及維護(hù)銀行賬戶等工作

負(fù)責(zé)維護(hù)與當(dāng)?shù)劂y行的關(guān)系

按規(guī)定辦理款項(xiàng)收付業(yè)務(wù)、銀行結(jié)算業(yè)務(wù)和網(wǎng)上結(jié)算業(yè)務(wù)

負(fù)責(zé)分公司庫存現(xiàn)金管理,支票、有價(jià)證券等票據(jù)的管理

建立健全各種資金賬目,正確運(yùn)用會計(jì)科目編制資金業(yè)務(wù)記賬憑證

負(fù)責(zé)登記現(xiàn)金日記賬、銀行存款日記賬

負(fù)責(zé)分公司網(wǎng)銀管理。負(fù)責(zé)開通網(wǎng)銀功能,保管相關(guān)密鑰、口令;負(fù)責(zé)網(wǎng)銀的授權(quán)管理、網(wǎng)銀支付業(yè)務(wù)及網(wǎng)銀的日常維護(hù)、

4、稅務(wù)管理、

負(fù)責(zé)每月到稅務(wù)局領(lǐng)取增值稅專用發(fā)票

負(fù)責(zé)登記臺賬、統(tǒng)計(jì)金額、稅額

負(fù)責(zé)認(rèn)證所有進(jìn)項(xiàng)增值稅專用發(fā)票

負(fù)責(zé)整理報(bào)稅資料

負(fù)責(zé)國稅:增值稅月度、季度申報(bào)、繳納稅款

負(fù)責(zé)地稅:城市維護(hù)建設(shè)稅、教育費(fèi)及附加、印花稅等申報(bào)繳款

負(fù)責(zé)代辦掛靠車輛代辦稅費(fèi)繳納,包括保險(xiǎn)費(fèi)

負(fù)責(zé)傳達(dá)稅務(wù)局方面關(guān)于公司稅收方面的日常業(yè)務(wù)

負(fù)責(zé)公司發(fā)票管理及開票員培訓(xùn)工作

及時收集和分析稅務(wù)信息,爭取和落實(shí)優(yōu)惠政策

負(fù)責(zé)建立和維護(hù)當(dāng)?shù)囟悇?wù)機(jī)構(gòu)的關(guān)系

負(fù)責(zé)反饋稅務(wù)問題,幫助公司優(yōu)化在延安的稅務(wù)策略、

5、預(yù)算管理、

負(fù)責(zé)指導(dǎo)各部門編制預(yù)算報(bào)告

負(fù)責(zé)每月填報(bào)公司的全面預(yù)算

負(fù)責(zé)預(yù)算編制的填報(bào)

負(fù)責(zé)預(yù)算控制的填報(bào)

負(fù)責(zé)各項(xiàng)報(bào)表的匯總及填報(bào)、

6、資產(chǎn)管理、

參與分公司固定資產(chǎn)的入庫驗(yàn)收

負(fù)責(zé)分公司各項(xiàng)固定資產(chǎn)的登記、核對,按規(guī)定計(jì)提折舊

負(fù)責(zé)真實(shí)、準(zhǔn)確編制固定資產(chǎn)、無形資產(chǎn)等資產(chǎn)報(bào)表,及時上報(bào)

負(fù)責(zé)分公司固定資產(chǎn)、無形資產(chǎn)的分析

負(fù)責(zé)組織分公司固定資產(chǎn)的清查盤點(diǎn),并生成盤點(diǎn)報(bào)告

負(fù)責(zé)及時備案分公司固定資產(chǎn)臺賬

負(fù)責(zé)審核分公司固定資產(chǎn)的報(bào)廢和處置,并及時上報(bào)、

7、財(cái)務(wù)分析、

收集公司業(yè)務(wù)數(shù)據(jù),建立行業(yè)總體和同行業(yè)經(jīng)營狀況數(shù)據(jù)庫

實(shí)時掌握公司財(cái)務(wù)狀況并分析,按要求定期提供財(cái)務(wù)分析報(bào)告

負(fù)責(zé)投資、預(yù)算等項(xiàng)目的財(cái)務(wù)分析、

8、部門基礎(chǔ)管理、

明確本部門各項(xiàng)工作分工

制定本部門工作計(jì)劃、目標(biāo)和任務(wù),并組織實(shí)施

負(fù)責(zé)本部門業(yè)務(wù)和行政事務(wù)對內(nèi)、外關(guān)系的協(xié)調(diào)與處理

積極配合公司、分公司相關(guān)部門牽頭的工作,保證各項(xiàng)工作高效高質(zhì)完成

學(xué)習(xí)、研究國家政策、上級單位和領(lǐng)導(dǎo)指示精神,開展業(yè)務(wù)學(xué)習(xí),提升職工素質(zhì)和工作效益

編制本部門年度財(cái)務(wù)預(yù)算,按照規(guī)定的管理制度進(jìn)行支出

負(fù)責(zé)本部門人員考勤管理和工作考核評定

負(fù)責(zé)本部門各類辦公設(shè)備的正常維護(hù)和保養(yǎng)、

部門協(xié)作關(guān)系、

內(nèi)部協(xié)調(diào)關(guān)系、公司所屬各部門、駐站統(tǒng)計(jì)核算業(yè)務(wù)、

外部協(xié)調(diào)關(guān)系、煉化公司、延安煉油廠、榆林煉油廠、永坪煉油廠、各承運(yùn)車隊(duì)、LNG客戶、產(chǎn)品經(jīng)銷公司所屬單位以及其他外部客戶