職位描述
Python爬蟲(chóng)開(kāi)發(fā)
工作職責(zé)：
1、采用多種數(shù)據(jù)獲取技術(shù)、方式, 對(duì)授權(quán)網(wǎng)站的數(shù)據(jù)進(jìn)行網(wǎng)絡(luò)抓取，確保數(shù)據(jù)獲取的效率和準(zhǔn)確性；
2、對(duì)抓取數(shù)據(jù)進(jìn)行清洗、整理、入庫(kù)；
3、解決常見(jiàn)的反爬蟲(chóng)問(wèn)題；
任職要求
1、熟悉常用Python爬蟲(chóng)框架Scrapy、Feapder中的至少一種;
2、熟悉網(wǎng)頁(yè)抓取原理及解析技術(shù)，熟練使用基于正則表達(dá)式、XPath、CSS等網(wǎng)頁(yè)信息抽取技術(shù);
3、熟悉網(wǎng)絡(luò)抓包工具，如Fiddler、Wireshark等；
4、熟悉 Web JS 逆向分析，反混淆等（優(yōu)先）；
5、熟悉 selenium 等自動(dòng)化框架；
6、熟悉python web框架等；
7、熟悉 MySQL、redis等常用組件；
8、良好的分析問(wèn)題、解決問(wèn)題的能力，能獨(dú)立承擔(dān)開(kāi)發(fā)任務(wù)；
9、良好的溝通能力和理解能力，以及自我推動(dòng)的主觀能動(dòng)性；
1、采用多種數(shù)據(jù)獲取技術(shù)、方式, 對(duì)授權(quán)網(wǎng)站的數(shù)據(jù)進(jìn)行網(wǎng)絡(luò)抓取，確保數(shù)據(jù)獲取的效率和準(zhǔn)確性；
2、對(duì)抓取數(shù)據(jù)進(jìn)行清洗、整理、入庫(kù)；
3、解決常見(jiàn)的反爬蟲(chóng)問(wèn)題；
任職要求
1、熟悉常用Python爬蟲(chóng)框架Scrapy、Feapder中的至少一種;
2、熟悉網(wǎng)頁(yè)抓取原理及解析技術(shù)，熟練使用基于正則表達(dá)式、XPath、CSS等網(wǎng)頁(yè)信息抽取技術(shù);
3、熟悉網(wǎng)絡(luò)抓包工具，如Fiddler、Wireshark等；
4、熟悉 Web JS 逆向分析，反混淆等（優(yōu)先）；
5、熟悉 selenium 等自動(dòng)化框架；
6、熟悉python web框架等；
7、熟悉 MySQL、redis等常用組件；
8、良好的分析問(wèn)題、解決問(wèn)題的能力，能獨(dú)立承擔(dān)開(kāi)發(fā)任務(wù)；
9、良好的溝通能力和理解能力，以及自我推動(dòng)的主觀能動(dòng)性；
獎(jiǎng)金績(jī)效
項(xiàng)目獎(jiǎng)金
工作地點(diǎn)
上海閔行區(qū)臨港浦江科技廣場(chǎng)5號(hào)樓5樓502
相似職位
- 爬蟲(chóng)工程師（外包庫(kù)帕思）1.2-1.3萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲(chóng)1.5-1.8萬(wàn)
上海 - 徐匯
湖南珊瑚信息技術(shù)有限公司 上海 - 徐匯
上海質(zhì)華廣告有限公司- 爬蟲(chóng)中級(jí)工程師（外包庫(kù)帕思）1.1-1.6萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲(chóng)開(kāi)發(fā)（數(shù)據(jù)采集方向）1.1-1.3萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲(chóng)工程師/中臺(tái)數(shù)據(jù)主管2-2.5萬(wàn)
上海 - 青浦
河北淺銀新能科技有限公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
韓宇璐/人事
剛剛活躍立即溝通
上海保攜智能科技有限公司上海保攜金融科技平臺(tái)：我們團(tuán)隊(duì)來(lái)自于騰訊、麥肯錫、IBM、平安、人保、安聯(lián)、安盛、慕再以及國(guó)內(nèi)其他頭部保險(xiǎn)公司的前高管組成。創(chuàng)新中國(guó)科技，融合全球智慧，致力于打造極致的財(cái)產(chǎn)險(xiǎn)用戶體驗(yàn)。通過(guò)互聯(lián)網(wǎng)科技，提效賦能，為金融行業(yè)提供有價(jià)值的服務(wù)。我們用技術(shù)為金融企業(yè)做咨詢，實(shí)現(xiàn)真正的一站式可落地的全產(chǎn)業(yè)鏈業(yè)務(wù)管理平臺(tái)。我們尊崇科技是核心，金融是本質(zhì)，服務(wù)是目的，為用戶提供相應(yīng)的解決方案。我們聚力為保險(xiǎn)公司提供經(jīng)營(yíng)管理、業(yè)務(wù)優(yōu)化、產(chǎn)業(yè)保險(xiǎn)定制、合規(guī)管理、融資服務(wù)、清結(jié)算服務(wù)、用戶體驗(yàn)規(guī)劃與設(shè)計(jì)、風(fēng)險(xiǎn)管理、營(yíng)銷(xiāo)管理、線下增值服務(wù)以及展業(yè)相關(guān)業(yè)務(wù)咨詢等服務(wù)。解決方案和產(chǎn)品包括：保險(xiǎn)產(chǎn)業(yè)鏈AI自動(dòng)化微信運(yùn)營(yíng)、代運(yùn)營(yíng)、保險(xiǎn)業(yè)務(wù)及產(chǎn)品定制、貨運(yùn)險(xiǎn)風(fēng)控平臺(tái)、汽車(chē)信用大數(shù)據(jù)平臺(tái)以及大健康管理平臺(tái)。合作客戶：人保、平安、太保、國(guó)壽、中華、陽(yáng)光、太平、大地、華安、大家保、渤海、長(zhǎng)安以及其他金融機(jī)構(gòu)我們期待和您攜手，致力于打造成為全球最優(yōu)秀的保險(xiǎn)行業(yè)服務(wù)提供商。
公司主頁(yè)