- 務必安裝
pip install scrapy -i + 鏡像源
- 使用scrpay創建爬蟲項目(終端創建):
- 1.創建項目:scrapy startproject BOOK
2.進入項目:cd BOOK
3.創建爬蟲:scrapy genspider book jd.com
4.運行爬蟲:scrapy crawl book - 打開pycharm 找到你創建的項目 oppen
- 在settings.py文件中修改協議還有瀏覽器的配置
瀏覽器的配置
改爲
6.之後進入book.py文件進行爬蟲檢驗