崗位職責:
1、根據(jù)項目需求對接大數(shù)據(jù)平臺,進行相應的數(shù)據(jù)接入處理,包含數(shù)據(jù)的提取、存儲以及清洗處理等;
2、根據(jù)業(yè)務需求設計數(shù)據(jù)庫邏輯和物理模型, 開發(fā)數(shù)據(jù)庫生產(chǎn)環(huán)境所需要的存儲過程、函數(shù)、腳本等;
3、參與數(shù)據(jù)庫生產(chǎn)環(huán)境的問題優(yōu)化和解決。
任職要求:
1、掌握數(shù)據(jù)庫開發(fā)技術:包含Oracle、Teradata、DB2、Mysql等,靈活運用SQL實現(xiàn)海量數(shù)據(jù)ETL加工處理;
2、熟悉Linux系統(tǒng)常規(guī)shell處理命令,靈活運用shell做的文本處理和系統(tǒng)操作;
3、有從事分布式數(shù)據(jù)存儲與計算平臺應用開發(fā)經(jīng)驗,熟悉Hadoop生態(tài)相關技術并有相關實踐經(jīng)驗著優(yōu)先,重點考察Hdfs、Mapreduce、Hive、Hbase;
4、熟練掌握一門或多門編程語言,并有大型項目建設經(jīng)驗者優(yōu)先,重點考察Java、Python、Perl;
5、熟悉數(shù)據(jù)倉庫領域知識和技能者優(yōu)先,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)開發(fā)測試工具與方法、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理;
6、掌握實時流計算技術,有storm開發(fā)經(jīng)驗者優(yōu)先;
7、認真負責,有團隊協(xié)作精神,能夠與團隊相處融洽,協(xié)同處理好項目工作;
8、本科及以上學歷,計算機相關專業(yè)優(yōu)先。