pycharm下虛擬環(huán)境執(zhí)行并調(diào)試scrapy爬蟲(chóng)程序

虛擬環(huán)境virtualenv安裝

參考我的上一篇文章windows下隔離python環(huán)境

配置scrapy環(huán)境

分別pip install Zope.Interface、Twisted、w3lib、lxml、pyOpenSSL、Scrapy
具體詳情不再講述
請(qǐng)參考
Scrapy安裝、爬蟲(chóng)入門教程、爬蟲(chóng)實(shí)例（豆瓣電影爬蟲(chóng)）
Scrapy 1.0 文檔

新建爬蟲(chóng)項(xiàng)目，pycharm運(yùn)行

我的項(xiàng)目名稱為RadioCrawl
文件夾為

Paste_Image.png

新建main.py

cmdline.execute("scrapy crawl playlist".split())```
表示用命令行的方式執(zhí)行我的名為playlist的爬蟲(chóng)程序
用pycharm打開(kāi)項(xiàng)目

![Paste_Image.png](http://upload-images.jianshu.io/upload_images/1908836-180a83828164cdac.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)
#####打開(kāi)Edit Configurations

![Paste_Image.png](http://upload-images.jianshu.io/upload_images/1908836-896914d8ad57def6.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)
#####調(diào)試
可以在其他代碼中設(shè)置斷點(diǎn)，debug運(yùn)行

![Paste_Image.png](http://upload-images.jianshu.io/upload_images/1908836-80d3f622ca69e5f1.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

![Paste_Image.png](http://upload-images.jianshu.io/upload_images/1908836-af33ca442139bc1a.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)
最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡(jiǎn)書系信息發(fā)布平臺(tái)，僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容