在线观看不卡亚洲电影_亚洲妓女99综合网_91青青青亚洲娱乐在线观看_日韩无码高清综合久久

鍍金池/ 問答/人工智能  Python/ python-scrapy第一個爬蟲程序

python-scrapy第一個爬蟲程序

scrapy教程：http://scrapy-chs.readthedocs...
環(huán)境：python3.6 + windows7
項目結(jié)構目錄：

clipboard.png

在根目錄（mySpider）執(zhí)行：scrapy crawl domz
結(jié)果：

clipboard.png

沒有教程說的[dmoz] 輸出，有沒有新建文件，初學python,初學scrapy,是不是哪里我沒理解的到位，求指教

回答
編輯回答
耍太極

你的請求的響應狀態(tài)碼為403錯誤，因此并不會執(zhí)行默認的callback函數(shù)parse，而會執(zhí)行請求的errback回調(diào)函數(shù)

2017年11月27日 20:41
編輯回答
夕顏

我發(fā)現(xiàn)，貌似start_requests方法你沒有，我昨天寫作了，寫成start_request，結(jié)果沒有任何請求

2017年10月27日 20:21
編輯回答
萌面人

這是我的博客，里面講解了一些配置問題:
Python Scrapy學習之pipelines不能保存數(shù)據(jù)到文件問題
不知道你的教程哪里看的，這里是我的一些學習的代碼，你可以看看:
https://github.com/kangbb/python_webspider

2017年3月16日 01:06