原创 python解析網址,多線程下載圖片

python解析網址,多線程下載圖片   import requests from bs4 import BeautifulSoup from downLoadFile import downLoadFile import thread

原创 python爬取網站數據

使用python獲取指定網址的源代碼,解析其中的圖片路徑;然後循環保存到本地磁盤。技術點:1、正則表達式匹配獲取圖片路徑2、python for 循環的使用3、python文件保存的使用''' 抓取網絡數據 ''' import re,r

原创 python 多線程

python 多線程非常簡單。 關鍵的使用點就是 : threading.Thread(target=函數名).start() #多線程例子 from time import ctime,sleep import thread

原创 hadoop mapreduce tomcat日誌分析

1、在windows 本機解壓縮 hadoop 2、cmd切換到 hadoop的bin目錄 執行 hadoop -version 查看是否滿足hadoop運行環境 3、cmd切換到hadoop的sbin目錄 執行 start-all.c

原创 JAVA 執行 dos/shell命令的實現

JAVA 執行 dos/shell命令的實現 1、獲取系統類型 2、linux下執行 3、windows下執行 4、執行結果返回。 package com.fw.common; import java.io.BufferedReade

原创 hadoop2.7.3-windows下開發環境搭建

hadoop2.7.3-windows下開發環境搭建 1、目的 在windows操作系統上不依賴cygwin運行hadoop2.7.3;並通過eclipse進行本機調試。 2、準備工作 (1)、  從hadoop 官方網站上下載的hado

原创 python 解析網頁,將抓取到的圖片保存到本地

python解析網頁內容,將抓取到的圖片保存到本機。 # -*- coding=utf8 -*- # @author:fw from urllib import request #引用

原创 docker在實際發佈tomcat + mysql項目中的應用

docker在實際發佈tomcat + mysql項目中的應用 docker 啓動myql -------------------------------- #1、將自己的mysql數據庫文件夾整體打包 tar czvf /data/

原创 python 操作 mysql數據庫

python 操作 mysql數據庫很簡單 與其他語言的jdbc操作流程一致。 1、創建數據庫connection連接 2、創建遊標 3、執行sql語句 4、提交事務 5、關閉connection連接。 import pymysql

原创 python 模擬登陸

python 模擬登陸  #模擬登陸 from urllib import request, parse def login(url): print('Login ...') username = input('use