原创 scrapy方法總結

spiders文件夾的.py爬蟲文件 方法或參數名 用法 name 每個項目唯一的名字,用來區分不同的 Spider allowed_domains 是允許爬取的域名,如果初始或後續的請求鏈接不是這個域名下的,則

原创 Scrapy入門項目

項目目標 創建一個 Scrapy 項目。 創建一個 Spider 來抓取站點和處理數據。 通過命令行將抓取的內容導出。 將抓取的內容保存到 MongoDB 數據庫。 開發工具 Scrapy 框架 MongoDB PyMong

原创 Downloader Middleware的用法——實現隨機User-Agent

Downloader Middleware 即下載中間件,它是處於 Scrapy 的 Request 和 Response 之間的處理模塊。 Scheduler(調度器) 從隊列中拿出一個 Request (請求)發送給 Down

原创 Django學習(1)——創建項目

創建項目 打開命令行,cd 到一個你想放置你代碼的目錄,然後運行以下命令: Windows django-admin startproject mysite linux django-admin startproject my

原创 flask入門項目

項目功能 這個小程序可以實現用戶(僅一個,且在程序中已經規定了用戶名和密碼)的登錄和註銷,可以顯示數據庫中 的條目。 涉及到的知識點 涉及到了配置文件、數據庫的初始化、連接和斷開,表單的提交讀取等等。 需要注意的 要仔細想想頁面之

原创 學習記錄(10)

今日學習綜述 任務佈置數據庫相關 git的安裝和創建版本庫 (好像今天並沒有看很多東西啊) git的安裝 安裝的是msysgit,是將虛擬環境和git打包了。 第一遍就沒安裝成功。。。出現了以下報錯 我覺得可能是我

原创 任務佈置之數據庫相關

數據庫相關 1. 網站的運行是否離不開數據庫?有無數據庫的區別是什麼?問什麼要用數據庫存儲數據(數據庫有什麼好處)? 並不是每個網站都需要數據庫的。可以存儲大量的信息,並且有高效的處理方法,可以對數據進行各種各樣的操作,增,刪,改

原创 任務佈置之前端相關

1. HTML 、 CSS 、 JavaScript 分別表示在前端網頁中扮演什麼角色? HTML(超文本標記語言)負責前端網頁的主幹部分。 CSS(層疊樣式表)是一種用來表現HTML或XML等文件樣式,用來佈局HTML Ja

原创 【tornado】利用H5 canvas和websocket實現手寫數字圖片傳輸

前言:這學期的綜合實踐要完成一個手寫數字識別的程序,這次先完成手寫數字圖片傳輸的任務。 要求: 完成一個畫板 遇到的問題: 運行時chrome瀏覽器出現報錯:Cannot read property ‘getContext’ of

原创 【TensorFlow】關於tf.assign()

轉自:https://www.jianshu.com/p/fc5f0f971b14 tf.assign(ref, value, validate_shape=None, use_locking=None, name=None) 函數完

原创 【TensorFlow】一個入門小程序

以下這段很短的 Python 程序生成了一些三維數據, 然後用一個平面擬合它 import tensorflow as tf import numpy as np # 使用 NumPy 生成假數據(phony data), 總共 1

原创 【Linux】進程間通信——共享內存

轉自:https://blog.csdn.net/wei_cheng18/article/details/79679440 什麼是共享內存? 什麼是共享內存? 在對個處理器的計算機系統中,可以被不同的CPU訪問的大容量空間。就是說一塊

原创 【Numpy】關於np.float32()

np.float32()和np.float64的區別 數位的區別,一個在內存中佔分別32和64個bits,也就是4bytes或8bytes 數位越高浮點數的精度越高

原创 【Linux】進程間通信之消息隊列

轉自https://blog.csdn.net/wei_cheng18/article/details/79661495 消息隊列 一. 什麼是消息隊列? 消息隊列是消息的鏈表,存放在內核中並由消息隊列標識符表示。   消息隊列提供了

原创 【TensorFlow】基本使用

基本使用 使用 TensorFlow, 你必須明白 TensorFlow: 使用圖 (graph) 來表示計算任務. 在被稱之爲 會話 (Session) 的上下文 (context) 中執行圖. 使用 tensor 表示數據. 通