粉嫩merna人体丰满欣欣赏,粗大与亲女伦交换H时霖时夏,免费观看又色又爽又黄的忠诚,少妇做爰免费视看片,日本精品巨爆乳无码大乳巨,少妇被躁爽到高潮无码麻豆AV,精品人妻无码一区二区三区狼群,精品无码久久久久久动漫,在线观看国产高清视频免费网站,性色做爰片在线观看WW

職位描述

任職要求：

• 熟悉Python語言，熟練運用多進程、多線程開發；

  
  

•  熟悉爬蟲原理，熟練掌握正則表達式、XPath、CSS等網頁信息抽取技術以及提取多層Json結構數據；

  
  

• 熟悉常見反爬機制，IP池、cookie、js加密等；對破解驗證碼有豐富經驗，獨立解決js反爬和模擬登陸問題

  
  

• 熟練使用Scrapy、Requests、Selenium、PhantomJS等框架；熟練使用抓包工具；

  
  

• 熟悉Linux基礎命令，熟悉Mysql、Redis等數據庫及相關操作；

  
  

  其它要求：

  
  

• 熟悉數據清洗，能夠用numpy、pandas、jieba等工具對數據進行處理者優先；

• 有Django/Flask等web框架開發經驗者優先
  

職位要求

崗位職責:

1、負責網絡爬蟲系統的設計與開發(結構化抽取，分布式，調度策略）；

2、研究爬蟲策略和防屏蔽規則，解決封鎖、驗證碼、加密，等問題，優化爬蟲效率和質量；

3、對抓取后的數據進行清洗、存儲，并持續優化平臺，提升爬蟲穩定性及可擴展性。

4、向部長匯報。

投遞郵箱