原创 我的友情鏈接

51CTO博客開發楊堅 博客空間豬窩老男孩linux運維數據可視化:https://www.jianshu.com/p/185709687e1e

原创 kafka 基礎知識

kafka 對消息保存時根據Topic 進行歸類;發送者爲producer 接收者爲Consumer;kafka集羣有多個實例,每個實例稱爲brokerzookeeper 爲集羣保存一些meta信息一個Topic 可以認爲是一類消息,每個t

原创 mysql的innodb中事務日誌ib_logfile

mysql的innodb中事務日誌ib_logfile事務日誌或稱redo日誌,在mysql中默認以ib_logfile0,ib_logfile1名稱存在,可以手工修改參數,調節開啓幾組日誌來服務於當前mysql數據庫,mysql採用順序,

原创 session共享

    Session共享有多種解決方法,常用的有四種:客戶端Cookie保存、服務器間Session同步、使用集羣管理Session、把Session持久化到數據庫。客戶端cookie保存    以cookie加密的方式保存在客戶端.優點

原创 mysql 日誌

   innodb 的事務日誌默認情況下會有兩個文件:ib_logfile0和ib_logfile1,這兩個文件就是重做日誌文件,或者事務日誌。   重做日誌的目的:萬一實例或者介質失敗,重做日誌文件就能派上用場   每個InnoDB存儲引

原创 zabbix監控交換機

    利用zabbix實現對交換機的監控,利用snmp實現監控的原理是通過oid獲取需要的監控數據。不同的交換機設備oid可能會有所差異,如果不確定具體的oid可以通過如下命令進行逐步分析:snmpwalk -v 2c -c homed

原创 Sublime3 的python代碼自動提示

配置sublime3的Anaconda 插件進行Python 代碼的自動補全功能1.安裝anaconda插件使用快捷鍵ctrl+shift+p打開命令面板,輸入install,面板上第一項應該會出現Package Control: Inst

原创 python 非root 用戶安裝第三方模塊

利用非root用戶安裝第三方模塊,同時打包常用的模塊避免多機部署時重複安裝。1.下載對應的軟件包2.創建一個隱藏目錄,用於存放軟件包/data/home/user00/.python_package3.修改非root用戶下.bash_pro

原创 Python 中進程、線程、協程、同步、異步、回調

上下文切換,指的是程序在執行中的一個狀態。通常我們會用調用棧來表示這個狀態——棧記載了每個調用層級執行到哪裏,還有執行時的環境情況等所有有關的信息1.進程每個進程有獨立的地址空間,資源句柄,他們互相之間不發生干擾。每個進程在內核中會有一個數

原创 python celery 模塊

Celery是基於Python開發的一個分佈式任務隊列框架,支持使用任務隊列的方式在分佈的機器/進程/線程上執行任務調度Celery是典型的生產生-消費者模式,主要由三部分組成:broker(消息隊列)、workers(消費者:處理任務)、

原创 django 開發簡介

1、Django目錄結構:urls.py:網址入口,關聯到對應的Views.py中的一個函數,訪問網址對應的函數。views.py:處理用戶發出的請求,從urls.py中對應過來,通過渲染templates中的網頁可以將顯示內容,比如登陸後

原创 python 爬蟲開發基礎知識

Request請求方式 常用的有get post請求的url 第一部分是協議(或稱爲服務方式)第二部分是存有該資源的主機IP地址(有時也包括端口號)第三部分是主機資源的具體地址,如目錄和文件名等請求頭 包含請求時的頭部信息,如User-A

原创 Python re模塊筆記

\d 數字:[0-9]\D 非數字:[^\d]\s 匹配任何空白字符:[<空格>\t\r\n\f\v]\S 非空白字符:[^\s]\w 匹配包括下劃線在內的任何字字符:[A-Za-z_0-9]\W 匹配非字母字符,即匹配特殊字符\A 僅匹配

原创 python 爬蟲之BeautifulSoup 庫的基本使用

import urllib2url = 'http://www.someserver.com/cgi-bin/register.cgi'values = {}values['name'] = 'Michael Foord'values['l

原创 python 開發之selenium

使用selenium和PhantomJS來模擬瀏覽器點擊下一頁,獲取頁面數據進行抓取分析用python寫爬蟲的時候,主要用的是selenium的Webdriver來獲取頁面數據使用webdriver需要安裝對應瀏覽器的driver,並加入到