在线观看不卡亚洲电影_亚洲妓女99综合网_91青青青亚洲娱乐在线观看_日韩无码高清综合久久

鍍金池/ 問答/Python/ 為啥爬取網(wǎng)頁會(huì)從電腦版網(wǎng)頁自動(dòng)切換到手機(jī)版頁面

為啥爬取網(wǎng)頁會(huì)從電腦版網(wǎng)頁自動(dòng)切換到手機(jī)版頁面

在webui看到的是,從電腦版網(wǎng)頁馬上切換到手機(jī)版頁面,
這是啥情況呢
我想要的是電腦版的頁面,總是跳轉(zhuǎn)到手機(jī)頁面去
爬取的地址是:https://www.shukeba.com/77567/

回答
編輯回答
帥到炸

服務(wù)端做了客戶端辨別,瀏覽器請(qǐng)求的時(shí)候會(huì)帶上user-agent,模擬爬蟲的時(shí)候,你也模擬一下user-agent即可

2018年7月2日 00:37