国产成人精品日本亚洲999,99久久久国产精品免费蜜臀 ,v一区无码内射国产,被调教的少妇雅芳1一19,国产成人a亚洲精v品无码

更新于 8月12日

爬蟲工程師

8000-13000元
  • 成都郫都區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)采集數(shù)據(jù)清洗PythonScrapyrequests
工作職責:
1. 負責設計和搭建高效的分布式爬蟲系統(tǒng);
2. 開發(fā)、維護爬蟲系統(tǒng),包括調度、抓取、維護、驗證等爬蟲工作;
3. 對不同網(wǎng)站的防御機制和反爬蟲策略進行深入研究,提煉關鍵技術點。
4. 能夠解決協(xié)議反爬、風控、人機識別等高級問題。
5. 負責爬蟲技術難點的攻克;
任職要求:
1. 對Python和計算機網(wǎng)絡有深入理解,能夠熟練運用多線程技術,掌握主流爬中框架;
2. 精通JavaScript逆向工程、虛擬機、代碼混淆、抽象語法樹(AST)等技術,并有實際的JavaScript逆向和分析;
3. 熟悉常見反爬機制,驗證碼識別,IP代理池應用lp池、headers認證和cookie等;
4. 能夠分析網(wǎng)絡鏈路,并處理TLS/HTTP2等協(xié)議流量識別、IP識別問題;
5. 了解基本的機器學習算法,可解決一些基礎的圖像驗證碼識別、人機對抗等問題;
6. 熟悉Redis、MySQL、MongoDB等數(shù)據(jù)庫技術,并有SQL或NOSQL數(shù)據(jù)庫實踐經驗;
7. 熟悉wireshark tcpdump等進行流量分析,了解大部分計算機網(wǎng)絡基本原理;
8. 了解分布式隊列、中間件等基礎架構組件;

工作地點

成都市-郫都區(qū)-古楠街97號

職位發(fā)布者

田蜜/人事經理

立即溝通