原创 win7通過wsus升級到win10總結

在wsus服務器,打開IIS,選擇“wsus”服務,點擊 mime type,修改或者添加".esd" Filename extension: .esd Mime type: application/octet-stream wind

原创 python批量快速合併excel文件

簡介 如果有很多excel文件需要合併到一個Excel文件中,使用複製粘貼來操作是非常痛苦,這時可以使用Python來批量自動操作。 把需要合併的Excel文件放到同一文件夾下。 安裝需要的庫 python環境Python3 pip3 in

原创 docker快速搭建分佈式爬蟲pyspider

簡介 pyspider是Python中強大Web爬蟲框架,並且支持分佈式架構。 爲什麼使用docker搭建pyspider 在安裝pyspider時爬過一些坑,比如使用pip install pyspider時,python的版本要求在3.

原创 docker之快速部署gogs git

前言 gogs簡介 Gogs 是一款極易搭建的自助 Git 服務。 Gogs 的目標是打造一個最簡單、最快速和最輕鬆的方式搭建自助 Git 服務。使用 Go 語言開發使得 Gogs 能夠通過獨立的二進制分發,並且支持 Go 語言支持的

原创 python3之51cto自動定時簽到

前言 之前寫過一遍,pyhton結合圖靈機器人自動回覆,之前51cto是使用網頁簽到,但是已經失效了,微信簽到的原理和之前的機器人差不多的,不過是使用了python的itchat模塊,結合定時功能,自動簽到。 安裝模塊 這裏使用的是pyt

原创 python3使用cookie免登錄爬取附件並下載

前言 由於一些論壇不登錄驗證,就不能查看帖子的內容和附件,所以需要登錄驗證,如果在代碼中添加登錄驗證,那就增加了代碼的複雜度,所以可以結合cookie來登錄然後爬取需要的資料 cookie的獲取 使用chrome,登錄後在開發工具裏查取

原创 python3批量爲文件重命名

簡介 爲什麼使用python批量重命名而沒有使用shell,python對文字的處理更靈活,對於文件名中的空格不會出現報錯。 代碼: #!/usr/bin/env python # -*- coding:utf-8 -*- """ @aut

原创 python3多線程批量去除電視劇的片頭片尾

簡介 下載的電視劇經常遇到片頭和片尾,有的片頭還有廣告,比較厭煩,所以筆者就寫了個腳本,使用python3,ffmpeg批量多線程去除了片頭和片尾,這裏針對的是單部多集電視劇的片頭、片尾,片頭片尾的時間比較相似 針對多部多集的電視劇,可以

原创 多線程爬取都挺好鏈接並保存到mongodb

一個比較簡單,python3多線程使用requests庫爬取都挺好,並使用正則提取下載鏈接,保存到mongodb #!/usr/bin/env python # -*- coding:utf-8 -*- """ @author:Aike

原创 多線程高容錯爬頭條街拍美圖

分析頭條的ajax,通過正則表達式,python3多線程高容錯爬取頭條的街拍美圖,保存到mongodb,並下載圖片 頭條的內容網頁較之前已經改版,圖牀頁不僅有ajax的還有html的內容網頁 所以使用了兩種正則,根據條件調用 #!/us

原创 python多線程秒爬貓眼電影Top100

通過python3的多線程,獲取貓眼電影top100電影清單,並保存信息到本地,使用了requests庫和正則表達式 #!/usr/bin/env python # -*- coding: utf-8 -*- # @Author: Ai

原创 python爬取豆瓣新書清單

使用python3的requests庫快速獲取豆瓣圖書推薦的新書清單,並保存書籍信息和圖書縮略圖圖片到本地 #!/usr/bin/env python # -*- coding:utf-8 -*- """ @author:Aiker Z

原创 dd命令使用總結

dd常用參數 if:就是input file,也可以是某設備文件of:就是output file,也支持是設備文件bs:規劃的一個block大小,若未指定則默認爲512bytecount:指定bs的數量skip=n,指 if 後面的原文件

原创 centos系統狀態查看常用命令總結

查看系統負載: w/uptime 最後面三個數字表示1分鐘,5分鐘,15分鐘平均有多少個進程佔用CPU 佔用CPU的進程可以是Running,也可以是Waiting 某一時刻1顆CPU只能有一個進程在使用其資源 查看cpu核數 cat /p

原创 centos7搭建微信小程序

準備域名和證書 域名解析 域名購買完成後, 需要將域名解析到實驗雲主機上 # ping wx.abcgogo.com -c 4 PING wx.abcgogo.com (203.195.219.131) 56(84) bytes of da