在线观看不卡亚洲电影_亚洲妓女99综合网_91青青青亚洲娱乐在线观看_日韩无码高清综合久久

鍍金池/ 問(wèn)答/Python/ 爬蟲(chóng)的useragent 如何看穿爬蟲(chóng)的

爬蟲(chóng)的useragent 如何看穿爬蟲(chóng)的

也就是服務(wù)器通過(guò)header中的useragent 能看出啥

回答
編輯回答
呆萌傻
  • UserAgent是指瀏覽器,它的信息包括硬件平臺(tái)、系統(tǒng)軟件、應(yīng)用軟件和用戶個(gè)人偏好，通過(guò)UA可以分析出瀏覽器名稱、瀏覽器版本號(hào)、渲染引擎、操作系統(tǒng)。使用方法直接打開(kāi)查看即可，也可以把其它瀏覽器的UA復(fù)制過(guò)來(lái)進(jìn)行分析。

比方說(shuō):

Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36

代表的含義是：

瀏覽器名稱    Chrome
瀏覽器版本號(hào)    65.0.3325.181
渲染引擎    WebKit 537.36
操作系統(tǒng)    Linux x86_64
  • 服務(wù)器可以用過(guò)檢查UserAgent是否為空，或者是否正常合理來(lái)判斷對(duì)方是否是爬蟲(chóng)。
  • 當(dāng)然現(xiàn)在也有不少爬蟲(chóng)，通過(guò)偽造UserAgent來(lái)躲過(guò)服務(wù)器的反爬蟲(chóng)檢查。
2017年6月26日 08:06