scrapy在命令行指定要採集的url

class MySpider(BaseSpider):

     # http://www.sharejs.com

    name = 'my_spider'   

 

    def __init__(self, *args, **kwargs):

      super(MySpider, self).__init__(*args, **kwargs)

 

      self.start_urls = [kwargs.get('start_url')]

 

 

#該代碼片段來自於: http://www.sharejs.com/codes/python/8809

命令行

scrapy crawl my_spider -a start_url="http://some_url"


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章