職位描述：

職位描述：

1、負(fù)責(zé)信息流推薦實(shí)時(shí)數(shù)據(jù)流框架的建設(shè)，統(tǒng)一各類業(yè)務(wù)計(jì)算范式，以及在線分析引擎的搭建和優(yōu)化；

2、負(fù)責(zé)信息流推薦時(shí)效性方向的架構(gòu)優(yōu)化，實(shí)現(xiàn)全系統(tǒng)秒級(jí)實(shí)時(shí)數(shù)據(jù)閉環(huán)。

職位要求：

1、熟悉至少一種開源流數(shù)據(jù)引擎，包括但不僅限于：Storm，SparkStreaming，F(xiàn)link，Kafka等，熟悉Flink優(yōu)先；

2、熟練掌握J(rèn)ava或Scala開發(fā)語(yǔ)言，具有優(yōu)秀的架構(gòu)設(shè)計(jì)能力，優(yōu)秀的編程能力及優(yōu)良的開發(fā)習(xí)慣；

3、具備獨(dú)立溝通需求，設(shè)計(jì)，架構(gòu)，開發(fā)的能力；具備從日常業(yè)務(wù)中發(fā)現(xiàn)問題并解決問題的能力。

篇2:大數(shù)據(jù)工程師數(shù)據(jù)流方向職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負(fù)責(zé)字節(jié)跳動(dòng)所有產(chǎn)品線風(fēng)控方向的數(shù)據(jù)流和相關(guān)數(shù)據(jù)服務(wù)；

2、面向超大規(guī)模數(shù)據(jù)問題，每天處理千億增量的用戶行為數(shù)據(jù)；

3、負(fù)責(zé)流式數(shù)據(jù)的實(shí)時(shí)傳遞，清洗，轉(zhuǎn)換，計(jì)算，并對(duì)外提供查詢服務(wù)；

4、負(fù)責(zé)相同數(shù)據(jù)集的批處理功能。

任職要求：

1、有至少TB以上級(jí)大數(shù)據(jù)處理經(jīng)驗(yàn)，編碼能力強(qiáng)悍，具備生產(chǎn)系統(tǒng)快速trouble-shooting的經(jīng)驗(yàn)和能力；

2、熟悉大數(shù)據(jù)處理工具/框架中的一項(xiàng)或多項(xiàng)，包括但不限于Hadoop,Mapreduce,Hive,Storm,Spark,Druid,kafka,hbase,canal，ES等；

3、對(duì)開源社區(qū)有過貢獻(xiàn)者優(yōu)先，請(qǐng)?jiān)诤?jiǎn)歷上說明。

篇3:實(shí)時(shí)數(shù)據(jù)流工程師職位描述與崗位職責(zé)任職要求

職位描述：

職位描述：

1、負(fù)責(zé)信息流推薦實(shí)時(shí)數(shù)據(jù)流框架的建設(shè)，統(tǒng)一各類業(yè)務(wù)計(jì)算范式，以及在線分析引擎的搭建和優(yōu)化；

2、負(fù)責(zé)信息流推薦時(shí)效性方向的架構(gòu)優(yōu)化，實(shí)現(xiàn)全系統(tǒng)秒級(jí)實(shí)時(shí)數(shù)據(jù)閉環(huán)。

職位要求：

1、熟悉至少一種開源流數(shù)據(jù)引擎，包括但不僅限于：Storm，SparkStreaming，F(xiàn)link，Kafka等，熟悉Flink優(yōu)先；

2、熟練掌握J(rèn)ava或Scala開發(fā)語(yǔ)言，具有優(yōu)秀的架構(gòu)設(shè)計(jì)能力，優(yōu)秀的編程能力及優(yōu)良的開發(fā)習(xí)慣；

3、具備獨(dú)立溝通需求，設(shè)計(jì)，架構(gòu)，開發(fā)的能力；具備從日常業(yè)務(wù)中發(fā)現(xiàn)問題并解決問題的能力。