基本要求
1,專科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè)畢業(yè)5年以上,非計(jì)算機(jī)相關(guān)專業(yè)8年以上
2,5年大數(shù)據(jù)數(shù)倉實(shí)際開發(fā)經(jīng)驗(yàn),熟悉Hadoop生態(tài)系統(tǒng)各組件的原理,精通Hive SQL,熟練使用HDFS,Yarn,Spark。有較強(qiáng)的SQL調(diào)優(yōu),性能優(yōu)化能力;
3,對數(shù)據(jù)敏感,有較強(qiáng)的邏輯推理能力,對大數(shù)據(jù)處理技術(shù)有強(qiáng)烈熱情;
4,有ElasticSearch,StarRocks使用經(jīng)驗(yàn)優(yōu)先;
5,熟練使用Linux常用命令,熟練安裝常見開源產(chǎn)品或組件;
6,有Java開發(fā)經(jīng)驗(yàn),實(shí)時(shí)Flink Jar開發(fā)經(jīng)驗(yàn)優(yōu)先;
崗位職責(zé):
1, 參與用戶相關(guān)系統(tǒng)數(shù)據(jù)開發(fā),包括公司內(nèi)部用戶數(shù)據(jù)處理分析,IDMAPPING,涵蓋數(shù)據(jù)接入、清洗、處理環(huán)節(jié)
2, 完成業(yè)務(wù)系統(tǒng)日常迭代的詳細(xì)設(shè)計(jì)編寫,代碼開發(fā),功能測試,高效完成交付
3, 負(fù)責(zé)結(jié)果數(shù)據(jù)存儲(ElasticSearch、StarRocks),查詢性能優(yōu)化
4, 線上問題排查和解決,疑難問題定位,快速修復(fù),保障系統(tǒng)穩(wěn)定運(yùn)行