国产成人精品日本亚洲999,99久久久国产精品免费蜜臀 ,v一区无码内射国产,被调教的少妇雅芳1一19,国产成人a亚洲精v品无码

該職位已失效,看看其他機會吧

大數(shù)據(jù)平臺運維 / Hadoop運維(數(shù)據(jù)遷移方向)

1.5-1.6萬
  • 武漢洪山區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

雇員點評標簽

  • 工作環(huán)境好
  • 同事很nice
  • 人際關系好
  • 團隊執(zhí)行強
  • 氛圍活躍
  • 免費班車
  • 管理人性化
  • 準時發(fā)工資

職位描述

數(shù)據(jù)遷移ShellHadoopSparkHDFShivelinux
生態(tài)業(yè)務,偶爾需要出差,base 武漢或者深圳 一、技術技能 1.大數(shù)據(jù)技術棧 Hadoop生態(tài)系統(tǒng) : 熟悉HDFS、MapReduce、YARN的基本原理與操作 掌握Hive、Spark等數(shù)據(jù)處理工具 分布式存儲系統(tǒng) : 了解HBase、MongoDB等NoSQL數(shù)據(jù)庫,熟悉對象存儲系統(tǒng)如OBS、OceanStore,數(shù)據(jù)倉庫與ETL工具 : 熟悉DolphinScheduler調度工具。 2.數(shù)據(jù)遷移工具與技術 DistCp : 熟悉Hadoop DistCp工具的使用,能夠編寫和優(yōu)化數(shù)據(jù)遷移腳本 數(shù)據(jù)同步工具 : 掌握Apache Sqoop、Flume等數(shù)據(jù)同步工具 3.API與集成 : 熟悉RESTful API、SOAP等接口技術,用于系統(tǒng)間數(shù)據(jù)傳輸 掌握消息隊列系統(tǒng)如Kafka、RabbitMQ在數(shù)據(jù)遷移中的應用 4.編程與腳本 編程語言 : 熟練掌握Java、Python、Scala等大數(shù)據(jù)常用編程語言 腳本編寫 : 熟悉Shell、Python腳本編寫,用于自動化遷移任務 版本控制 : 熟悉Git或其他版本控制系統(tǒng),管理遷移腳本和配置 5.數(shù)據(jù)庫管理 關系型數(shù)據(jù)庫 : 熟悉MySQL、PostgreSQL、Oracle、SQL Server等RDBMS的管理與優(yōu)化 NoSQL數(shù)據(jù)庫 : 熟悉MongoDB、HANA、Redis等NoSQL數(shù)據(jù)庫的管理與優(yōu)化 數(shù)據(jù)遷移策略 : 掌握數(shù)據(jù)抽取、轉換、加載(ETL)流程 熟悉數(shù)據(jù)清洗、去重、驗證等遷移后處理技術 6. 數(shù)據(jù)質量與驗證 數(shù)據(jù)校驗工具 : 熟悉數(shù)據(jù)校驗和測試工具,掌握數(shù)據(jù)完整性、一致性、準確性的驗證方法 熟悉數(shù)據(jù)質量監(jiān)控與報告工具 7. 系統(tǒng)與網(wǎng)絡 操作系統(tǒng) : 熟悉Linux/Unix系統(tǒng)管理,掌握Shell命令與腳本 網(wǎng)絡基礎 : 理解網(wǎng)絡協(xié)議、帶寬管理、網(wǎng)絡安全等基礎知識 熟悉數(shù)據(jù)傳輸中的網(wǎng)絡優(yōu)化技術 二、項目經(jīng)驗 1. 大數(shù)據(jù)遷移項目 成功案例 : 至少2-3個完整的大數(shù)據(jù)遷移項目經(jīng)驗,涵蓋不同規(guī)模和復雜度 遷移類型 : 經(jīng)歷過等多種類型 數(shù)據(jù)量處理 : 處理過PB級別的數(shù)據(jù)遷移任務,具備處理大規(guī)模數(shù)據(jù)的能力 2. 問題解決 故障排除 : 具備快速定位和解決遷移過程中出現(xiàn)的各類技術問題 優(yōu)化經(jīng)驗 : 有遷移過程中性能優(yōu)化、資源調優(yōu)的實際經(jīng)驗 三、其他能力 1. 數(shù)據(jù)安全與合規(guī) 安全措施 : 熟悉數(shù)據(jù)加密、訪問控制、身份驗證等安全措施 2. 監(jiān)控與日志管理 監(jiān)控工具 : 熟悉Prometheus、Grafana、Nagios等監(jiān)控工具的使用 日志分析 : 掌握ELK Stack(Elasticsearch, Logstash, Kibana)或其他日志管理工具 四、軟技能 1. 溝通能力 團隊溝通 : 能夠清晰地與技術團隊和非技術人員溝通遷移計劃與進展 文檔編寫 : 撰寫詳細的技術文檔、遷移報告和用戶手冊 2. 學習能力 技術更新 : 持續(xù)學習新技術和工具,保持對大數(shù)據(jù)和云計算領域的最新了解 適應變化 : 能夠快速適應項目需求變化和技術環(huán)境的變化 3. 問題解決與決策 分析能力 : 具備強大的邏輯思維和分析能力,能夠獨立解決復雜問題 決策能力 : 在關鍵時刻做出合理的技術和項目管理決策 4. 團隊合作 協(xié)作精神 : 能夠在多學科團隊中高效合作,共同完成項目目標 領導能力 : 具備一定的團隊領導和管理能力,能夠指導和培訓初級成員
查看全部

工作地點

武漢市-洪山區(qū)-花城大道9號武漢軟件新城2期c15棟

職位發(fā)布者

阿舒/高級招聘經(jīng)理

三日內活躍
立即溝通
公司Logo軟通動力信息技術(集團)股份有限公司公司標簽
軟通動力信息技術(集團)股份有限公司(以下簡稱“軟通動力”)是中國數(shù)字技術產(chǎn)品和服務創(chuàng)新領導企業(yè),致力于成為一家具有全球影響力的科技企業(yè),企業(yè)數(shù)字化轉型可信賴合作伙伴。公司2005年成立于北京,多年來始終堅持科技創(chuàng)新,具有軟硬全棧的智能技術產(chǎn)品和服務能力,提供軟件與數(shù)字技術服務、計算產(chǎn)品與數(shù)字基礎設施、數(shù)字能源與智算服務以及國際化服務。目前,公司在10余個重要行業(yè)服務超過1100家國內外客戶,其中超過230家客戶為世界500強或中國500強企業(yè),員工近90000人。軟通動力擁有軟通咨詢、軟通金科、軟通工業(yè)互聯(lián)、機械革命、軟通華方等業(yè)務子品牌,并在全球40余個城市布局業(yè)務,構建北美、日本、東南亞、中東四大國際交付中心,在北京城市副中心、江蘇無錫建設兩大智能制造基地。同時,公司前瞻布局智能制造、ICT軟硬基礎能力和生產(chǎn)力智能化產(chǎn)品,打造產(chǎn)業(yè)鏈閉環(huán)。軟通動力設立30個能力中心,擁有1個國家級工程實驗室,6個省市政府認定的工程、技術實驗室及研發(fā)中心,1個博士后科研工作站,50+技術合作伙伴的生態(tài)合作體系,不斷探索前沿技術的巨大商業(yè)應用潛力。公司旗下教育品牌軟通教育,擁有一家全日制本科學院——鄭州西亞斯學院數(shù)字技術產(chǎn)業(yè)學院;同時在全國合作院校600多所,設有70多個校企聯(lián)合人才培養(yǎng)基地,通過校企合作、協(xié)同育人,為社會培養(yǎng)高素質應用型人才。軟通動力先后獲得“2023年中國IT服務市場排名TOP 1”、“2024年Q4 PC出貨量國內市場份額排名TOP 2”、“2024年中國軟件和信息技術服務競爭力百強企業(yè)”、“2023年中國信創(chuàng)企業(yè)100強”、“2024萬得ESG評級(Wind ESG Rating)AA級及信息技術服務行業(yè)ESG綜合得分排名第一”等榮譽及市場認可,并擁有全球軟件工程領域最高級別CMMI V2.0成熟度5級評估認證、國家研發(fā)運營一體化(DevOps)三級能力成熟度模型認證、信息技術服務標準(ITSS)運維能力成熟度一級認證等專業(yè)資質,支撐公司更優(yōu)質的服務體系。
公司主頁