原创 scrapy twisted.python.failure.Failure OpenSSL.SSL.Error
scrapy twisted.python.failure.Failure OpenSSL.SSL.Error from OpenSSL import SSL from scrapy.core.downloader.context
2020-06-30 16:57:56
原创 selenium, pyppeteer 如何避免被服務器檢測
1.selenium 處理方法 from selenium import webdriver from selenium.webdriver import ChromeOptions def get_cookie():
2020-06-30 15:57:39
原创 python2 用pymysql代替MySQLdb
安裝 pymysql pip install pymysql import pymysql pymysql.install_as_MySQLdb()
2020-06-30 15:57:39
原创 python2 生成 13位，16位 時間戳
import datetime import time def get_float_time_stamp(): datetime_now = datetime.datetime.now() return date
2020-06-30 15:57:39
原创 Privoxy 安裝配置
場景： 項目部署在內網的服務器，但是項目需要外網，這時找一臺有外網的服務器搭建一個代理服務。 1. 安裝 apt-get install privoxy 2. 配置 配置路徑 cd /etc/privoxy vim config
2020-02-22 18:29:36
原创 pyspider 的使用
開始命令 ： 1.pyspider all 2. 127.0.0.1:5000 文檔url: http://www.pyspider.cn/book/pyspider/self.crawl-16.html from pyspider.
2020-02-22 18:29:36