原创 Scrapy設置之提前終止爬蟲

轉載自  https://blog.csdn.net/Q_AN1314/article/details/51104701Scrapy的CloseSpider擴展會在滿足條件時自動終止爬蟲程序。可以設置CLOSESPIDER_TIMEOUT

原创 Eclipse SVN地址變更後,右鍵卡死解決方法(二)常規方法

百度一下:svn 信息改變後 eclipse右鍵卡死)在Eclipse開發平臺中,任意右鍵卡死,強制關閉Eclipse進程。(嘗試多次後發現是項目的svn服務器地址變了,而我本地地址還沒有更新,結果一點擊右鍵可能是eclipse svn

原创 select 下拉框設爲disabled不能提交值

在有一次的項目開發過程中,下拉框選擇值後,頁面跳轉到其他頁面,在處理過程中,將此下拉框設爲disabled(需求原因,不能更改此下拉框的值),但後面提交時,發現此下拉框值不見了(或者說值爲空),經過長時間的查找原因,發現此下拉框爲disa

原创 JAVA設計模式之門面模式(外觀模式)

醫院的例子   現代的軟件系統都是比較複雜的,設計師處理複雜系統的一個常見方法便是將其“分而治之”,把一個系統劃分爲幾個較小的子系統。如果把醫院作爲一個子系統,按照部門職能,這個系統可以劃分爲掛號、門診、劃價、化驗、收費、取藥等。看病

原创 《JAVA與模式》之裝飾模式

《JAVA與模式》之裝飾模式 在閻宏博士的《JAVA與模式》一書中開頭是這樣描述裝飾(Decorator)模式的:   裝飾模式又名包裝(Wrapper)模式。裝飾模式以對客戶端透明的方式擴展對象的功能,是繼承關係的一個替代方案。

原创 訪問限制:由於對必需的庫xxxxxx.jar 具有一定限制解決方法

解決辦法(一) 點擊Eclipse菜單欄的window---->preferences---->java---->Compiler---->Errors/Warning查看每一項後面的選項,如果是Warning或Ignore則不管,如果是

原创 《JAVA與模式》之享元模式

《JAVA與模式》之享元模式 在閻宏博士的《JAVA與模式》一書中開頭是這樣描述享元(Flyweight)模式的:   Flyweight在拳擊比賽中指最輕量級,即“蠅量級”或“雨量級”,這裏選擇使用“享元模式”的意譯,是因爲這樣更能

原创 JAVA組合模式

先看看組合模式的定義吧:“將對象組合成樹形結構以表示‘部分-整體’的層次結構。組合模式使得用戶對單個對象和組合對象的使用具有一致性。”    就拿剪髮辦卡的事情來分析一下吧。    首先,一張卡可以在總部,分店,加盟店使用,那麼總部

原创 《JAVA與模式》之單例模式

《JAVA與模式》之單例模式 在閻宏博士的《JAVA與模式》一書中開頭是這樣描述單例模式的:   作爲對象的創建模式,單例模式確保某一個類只有一個實例,而且自行實例化並向整個系統提供這個實例。這個類稱爲單例類。 單例模式的結構  

原创 [svn不提交classes文件夾下的文件][SVN不交付classes解決方案]

1,先刪掉classes文件,創建一個新的空白classes文件夾,選擇該文件夾點擊右鍵“TortoiseSVN->添加到忽略列表”。 2、禁止Eclipse把SVN信息編譯到classes裏 (1)在Eclipse中配置“Java

原创 《JAVA與模式》之代理模式

《JAVA與模式》之代理模式 在閻宏博士的《JAVA與模式》一書中開頭是這樣描述代理(Proxy)模式的:   代理模式是對象的結構模式。代理模式給某一個對象提供一個代理對象,並由代理對象控制對原對象的引用。 代理模式的結構   所

原创 mysql 用戶及授權相關命令

一、登陸 mysql 1. 輸入命令:  mysql -u username -p 。回車後,輸入密碼。 二、創建用戶 命令:CREATE USER 'username'@'host' IDENTIFIED BY 'password';

原创 MySQL5.7修改字符集

MySQL5.7修改字符集 本人安裝的mysql版本是5.7.20,安裝好mysql後就要對字符集進行修改了,於是照着網上的大部分教程說的去安裝目錄找一個my-default.ini文件,然後重命名爲my.ini,再對其進修改字符集即可,

原创 python爬蟲總結

目錄 常用第三方庫 爬蟲框架 動態頁面渲染 爬蟲防屏蔽策略 結語 由於某些原因最近終於可以從工作的瑣事中抽出身來,有時間把之前的一些爬蟲知識進行了一個簡單的梳理,也從中體會到階段性地對過往知識進行梳理是真的很有必要。 常用第三方庫 對於

原创 企業級網絡爬蟲應用(1)

企業級網絡爬蟲應用(1) 開篇 開篇不打算寫太多技術細節,只想來闡述一下計劃寫該系列博客的初衷。 公司有一項業務是做政策收集及發佈的,說白了就是人工查看哪些政府網站有新的政策發佈了,就複製粘貼,修改下格式發佈到我們的網站上,這算是一個政策