原创 liunx上傳文件服務
一、模塊式使用 import paramiko t = paramiko.Transport(('x.x.x.x',22)) # 設置SSH連接的遠程主機地址和端口 t.connect(username='xxx',password=
2020-07-04 00:22:27
原创 Python爬蟲js處理
一、jquery發送ajax請求格式 """ 形式：$.ajax({name:val, name:val,...}); 可選字段： 1）url：鏈接地址，字符串表示 2）data：需發送到服務器的數據，GET與POST都可以，格式爲{A
2020-07-04 00:22:27
原创 MongoDB和MySQL遠程連接
遠程 或者 可視化界面連接MongoDB服務 vi etc/mongdb.conf # bind_ip = 127.0.0.1 重啓MongoDB服務 查看進程，使用kill命令；不能使用kill -9 在客戶端進去，使用shut
2020-07-04 00:22:27
原创 seleinum 的簡單配置與使用
一、瀏覽器地址欄輸入chrome://version/查看瀏覽器版本 二、下載與瀏覽器匹配的瀏覽器驅動 下載地址http://chromedriver.storage.googleapis.com/index.html 版本映射表 4.
2020-07-04 00:22:16
原创 Pyspider配置本地數據庫
一、配置mysql 創建相關數據庫及用戶 mysql> create database taskdb default character set 'utf8'; Query OK, 1 row affected (0.01 sec
2020-07-04 00:22:15
原创 red hat 安裝redis
源碼下載 從官網下載 http://download.redis.io/releases/redis-3.0.0.tar.gz 將redis-3.0.0.tar.gz拷貝到/usr/local下
2020-07-04 00:22:15
原创 scrapy custom_settings
單獨爬蟲配置 custom_settings = { 'SOME_SETTING': 'some value', } 不同爬蟲pipeline設置 custom_settings = { 'ITEM_
2020-07-04 00:22:15
原创 代碼部署
一、不是腳本 #! /bin/bash # 使用環境變量生效 source /etc/profile PROJECT_DIR="/data" PROJECT_NAME="test-proxy-ip" PYTHON_ENV="prox
2020-07-04 00:22:15
原创 mysql創建用戶控制權限
一、實例 - use mysql; -- create user 'zhang'@'%' identified by 'Zhang.@123'; -- grant select on *.* to "zhang"@'%'; 二、詳細步驟
2020-07-04 00:22:15
原创 Python迭代器、生成器、裝飾器理解
一、迭代器 # coding=utf-8 """ 迭代器 迭代器是一個可以記住遍歷的位置的對象 單向遍歷 迭代器有兩個基本的方法：iter() 和 next() 迭代器遍歷可以用for循環也可用next() """ li = [1,
2020-07-04 00:22:15
1
原创 Python操作xls表格
一、以創建表和追加數據 import xlrd import xlwt from xlutils.copy import copy def write_excel_xls(path, sheet_name, value):
2020-05-26 14:12:09
原创 red hat 安裝Python環境
weget 下載指定的Python版本 weget https://www.python.org/ftp/python/3.6.8
2020-05-24 06:38:26
原创 B站視頻彈幕
import requests # import jieba # import pandas # import matplotlib.pyplot as plt # from wordcloud import WordCloud, Im
2020-05-21 05:21:10
原创 windows環境下配置mitmproxy
一、安裝 pip install mitmproxy 二、查看版本號 完成後，系統將擁有 mitmproxy、mitmdump、mitmweb 三個命令，由於 mitmproxy 命令不支持在 windows 系統中運行（這沒關係，不用擔
2020-04-14 01:59:34