崗位職責(zé):
根據(jù)現(xiàn)有及規(guī)劃中的數(shù)據(jù)運營業(yè)務(wù),設(shè)計數(shù)據(jù)運營管理平臺,主要是鑒權(quán)、授權(quán)管理、計數(shù)管理、接口管理,日常對外的對接調(diào)試管理等內(nèi)容。負(fù)責(zé)數(shù)據(jù)運營平臺的設(shè)計,并推動開發(fā)落地。
崗位要求:
1、掌握mysql、oracle、postgresql等一種或多種數(shù)據(jù)庫,會編寫函數(shù)、存儲過程,能進行數(shù)據(jù)庫查詢性能調(diào)優(yōu)和常見問題處理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具進行數(shù)據(jù)的處理;
3、熟悉大數(shù)據(jù)相關(guān)技術(shù),對hadoop(hdfs/mapreduce/hive/hbase)生態(tài)有所了解,了解常用數(shù)據(jù)接入組件datax、sqoop、flumen等一種或多種;
4、掌握一種或多種計算框架和消息隊列:spark、flink、kafka等;
5、掌握greenplum、doris等一種或多種olap數(shù)據(jù)庫,進行相關(guān)模型的設(shè)計和數(shù)據(jù)管理;掌握python、java、scala等一種或多種編程語言;熟悉數(shù)據(jù)需求分析、數(shù)據(jù)探查、數(shù)據(jù)模型設(shè)計、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理等理論方法,會使用工具(powerdesigne、pdmaner)進行數(shù)據(jù)模型設(shè)計和關(guān)系圖梳理;
6、具有多個數(shù)據(jù)倉庫開發(fā)項目經(jīng)驗,熟悉數(shù)據(jù)分析展示工具,具有實際數(shù)據(jù)可視化開發(fā)項目經(jīng)驗;
7、具備團隊協(xié)作和溝通能力,能夠與其他成員溝通協(xié)作,共同推進數(shù)據(jù)工程項目;