原创 scrapy知網爬蟲項目-2(項目創建)

新建一個目錄文件 開啓命令行進入該文件夾下 輸入命令:scrapy startproject mySpider 創建的項目目錄如下: zhiwang/ scrapy.cfg zhiwang/ __i

原创 scrapy獲取目標cookie

python2.7代碼實現: 爬蟲主文件: # -*- coding: utf-8 -*- import sys from scrapy.http import Request #python語言轉碼,非必要 reload(sy

原创 scrapy知網爬蟲項目-1(scrapy瞭解及環境搭建)

Scrapy Engine(引擎): 負責Spider、ItemPipeline、Downloader、Scheduler中間的通訊,信號、數據傳遞等。 Scheduler(調度器): 它負責接受引擎發送過來的Request請求,

原创 setTimeout定時器的異步及let循環中的同步異步問題 個人理解筆記

新手個人理解  如有誤解   敬請各位前輩評論指出 謝謝例1: for循環setTimeout定時器:for(var i = 1 ; i <= 5; i++){ (function(){     setTimeout(function t

原创 關於linux遠程斷開,後臺進程關閉問題

linux遠程連接設置 後臺運行任務 關閉連接後 便會被kill 如下: 後臺運行任務: # nohup node 路徑 > 日誌文件 2>&1 & 查看後臺任務: # jobs

原创 java後端本地打包文件 上傳linux雲服務器 啓動服務

本地打包先install:mvn clean install -DskipTests  或 mvn clean install -Dmaven.test.skip=true再打包:mvn package -DskipTests 或 mvn

原创 javascript嚴格模式 未聲明變量問題筆記

“嚴格模式”是在ES5中引入的。它痛正常模式,或者說寬鬆、懶惰模式相比,嚴格模式在行爲上有很多不同。其中一個不同的興偉是嚴格模式禁止自動或隱式地創建變量。而正常模式在發現未聲明的變量時則會自動聲明但不賦值。例(正常模式與嚴格模式比較):f

原创 JavaScript let聲明變量 個人筆記

    let允許你聲明一個作用域被限制在塊級中的變量、語句或者表達式。在一個作用域裏,只允許你聲明一次不允許再次聲明。例1 :(function fun1(){ let a = 3 ; console.log( a ); //輸出3})