問(wèn)題描述

我有很多spider，不能每次調(diào)試都手動(dòng)創(chuàng)建一個(gè)debugger吧（scrapy crawl spider_name）

想可以在spider文件中直接右鍵運(yùn)行/調(diào)試。

問(wèn)題解答

參考文章：Scrapy爬蟲常見(jiàn)問(wèn)題總結(jié)

在spider文件中，加入cmdline的調(diào)用方法

import scrapy.cmdline#Your Spider Class...def main(): scrapy.cmdline.execute([’scrapy’, ’crawl’, ’your_spider_name’])if __name__ == ’__main__’: main()回答2：

新建一個(gè)py文件，用這個(gè)來(lái)調(diào)試

from scrapy.cmdline import executeimport sysimport ossys.path.append(os.path.dirname(os.path.abspath(__file__)))execute(['scrapy','crawl','YOUR_SPIDER'])