原创 《Python網絡爬蟲實戰》讀書筆記1
文章目錄Python與網絡爬蟲robots與Sitemap查看網站所用的技術數據採集文件與數據的存儲CSV的讀寫使用數據庫使用MySQL使用SQLite3使用SQLAlchemyJavaScript與動態內容使用Selenium初
2020-04-28 07:25:56
13
原创 《Python網絡爬蟲實戰》讀書筆記2
文章目錄更強大的爬蟲網站反爬蟲多進程編程與異步爬蟲抓取用異步的形式抓取數據更多樣的爬蟲編寫Scrapy爬蟲新建一個Scrapy項目創建爬蟲Scrapyd使用Gerapy部署和管理爬蟲添加主機(在本機可以創建多個主機，只需要修改cf
2020-04-28 07:25:56
4
原创 《數據科學實戰之網絡爬取》讀書筆記
文章目錄兩種方式爬取Hacker News網頁使用requests和Beautiful Soup爬取使用api爬取爬取書籍信息爬取GitHub上項目被收藏的次數爬取和分析網絡論壇的互動爬取網絡論壇的互動信息分析網絡論壇的互動信息收
2020-04-21 05:28:52
原创 三、在eclipse中新建一個.so項目
文章目錄在eclipse中新建一個.so項目讓so中導出類使用nm命令查看類是否已經導出 在eclipse中新建一個.so項目 新建一個C/C++ Project項目 選擇下面的C++ Managed Build 找到
2020-03-11 15:16:21
原创 二、在eclipse中新建一個使用OpenCv的測試項目
文章目錄安裝opencv在eclipse中新建一個測試項目配置對應的include和lib路徑重新編譯測試項目 安裝opencv 安裝opencv的方法很多，可以apt安裝，也可以用source自己本地編譯安裝 安裝後得到open
2020-03-11 15:16:11
原创 《Python編程快速上手,讓繁瑣工作自動化》讀書筆記
文章目錄組織文件shutil模塊複製文件和文件夾文件和文件夾的移動與改名刪除文件和文件夾os.unlink(filename)刪除文件os.rmdir(foldname)刪除空目錄shutil.rmtree(foldname)刪除
2020-03-07 04:12:26
原创 ffmpeg音視頻文件音視頻流抽取，初步嘗試人聲分離
文章目錄ffmpeg抽取音視頻文件中的音頻流音頻流類型AAC與m4a的區別AAC與mp3的區別用ffmpeg查看視頻的信息用ffmpeg抽取AAC音頻流從AAC文件中獲取音軌音軌是什麼東西分離人聲和背景聲測試系統介紹安裝測試查看效
2020-02-29 22:08:51
1
原创 WireShark提取天貓魔盒請求鏈接
文章目錄配置網絡PC上打開熱點配置機頂盒安裝和配置監聽軟件安裝配置軟件得到後臺鏈接 配置網絡 PC上打開熱點 需要能在pc機上面打開移動熱點 需要記住當前的網絡名稱和密碼，機頂盒連接時候需要輸入 配置機頂盒 機頂盒連上剛纔的
2020-02-22 01:46:08
原创 自定義chrome.devtools.network的Chrome插件
文章目錄本文要實現的內容chrome擴展(即插件)簡介學習Chrome插件開發有什麼意義爲什麼是Chrome插件而不是Firefox插件瞭解chrome插件什麼是chrome插件擴展怎樣開始chrome插件開發測試開始使用chro
2020-02-22 01:46:08
18
原创 4、Django+Uwsgi+Nginx的生產環境部署---用uwsgi+nginx部署Django項目
無聊的菜單欄所使用的操作系統與環境本文前提用uwsgi+nginx部署Django項目配置django關於static資源的路徑首先配置用uwsgi使用到的ini文件對nginx進行配置 所使用的操作系統與環境 操作系統：cent
2019-08-14 00:42:34
原创 2、Django+Uwsgi+Nginx的生產環境部署---centos6安裝Nginx
文章目錄所使用的操作系統與環境安裝前提使用yum方式安裝nginx所需要的包使用源碼方式安裝nginx所需要的包安裝pcre庫zlib 安裝OpenSSL 安裝源代碼安裝nginx啓動並測試nginx 所使用的操作系統與環境 操作
2019-08-14 00:42:34
原创 Centos安裝Nginx
帶你快速飛所使用的操作系統與環境安裝前提使用yum方式安裝nginx所需要的包使用源碼方式安裝nginx所需要的包安裝pcre庫zlib 安裝OpenSSL 安裝源代碼安裝nginx啓動並測試nginx 所使用的操作系統與環境 操
2019-08-09 21:47:30
原创 MySQL主從模式
高冷的菜單欄安裝MySQL測試環境介紹主從備份原理在A機器中的操作新建一個測試數據庫zengraoli2新建一個遠程用戶zeng配置my.cnf在MySQL終端查看mater信息在B機器中的操作新建數據庫zengraoli配置my
2019-08-09 21:47:30
原创 配置Nginx反向代理
快速帶你飛測試環境介紹下載並安裝Nginx驗證測試的準備工作配置Nginx作爲負載其他一些負載分發策略 測試環境介紹 測試環境爲centos7.5 Nginx負載地址：10.0.8.130 A機器ip：10.0.8.37，http
2019-08-09 21:47:30
原创 Redis哨兵5.0.3（Sentinel）模式
孤傲的菜單Sentinel模式簡介測試環境介紹Sentinel部署環境流程介紹開始部署對A機器的操作對B機器的操作開始測試完成設想2完成設想3使用keepalived完成哨兵模式需要特別注意防火牆在A、B服務器中的配置更多的命令可
2019-08-09 21:47:30