原创 Python中的logging模塊:按時間滾動、按文件大小滾動、過期刪除

Python中自帶了logging庫,可以提供打印日誌、記錄日誌文件、根據時間日誌滾動、根據文件大小日誌滾動、過期文件刪除的功能。   #!/usr/bin/env python # -*- coding: utf-8 -*- imp

原创 win10 anaconda 安裝tensorflow 2.x 使用報錯:has no attribute 'populate_dict_with_module_objects'

如題,在win10下,anaconda 環境裏用pip安裝好tensorflow2.x 最新版本,安裝成功,但是import報錯 module 'tensorflow.python.keras.utils.generic_utils' h

原创 CNN 可視化解釋

轉自《一位中國博士把整個CNN都給可視化了》 鏈接:CNN解釋器 卷積核作用過程     RELU 激活函數   池化層   輸出分類    

原创 Datawhale 計算機視覺基礎-圖像處理(上)- Task06 邊緣檢測

簡介 什麼是邊緣? 邊緣是圖像強度函數快速變化的地方 如何檢測邊緣? 爲了檢測邊緣,我們需要檢測圖像中的不連續性,可以使用導數來檢測不連續性 如上圖所示,上圖的第一幅圖表示一張數字圖片,我們對水平紅線處進行求導,便可得到上圖二中的關係,

原创 Datawhale 計算機視覺基礎-圖像處理(上)-Task05 圖像分割/二值化

簡介 該部分的學習內容是對經典的閾值分割算法進行回顧,圖像閾值化分割是一種傳統的最常用的圖像分割方法,因其實現簡單、計算量小、性能較穩定而成爲圖像分割中最基本和應用最廣泛的分割技術。它特別適用於目標和背景佔據不同灰度級範圍的圖像。

原创 Datawhale 計算機視覺基礎-圖像處理(上)-Task04 圖像濾波

簡介 圖像的實質是一種二維信號,濾波是信號處理中的一個重要概念。在圖像處理中,濾波是一種非常常見的技術,它們的原理非常簡單,但是其思想卻十分值得借鑑,濾波是很多圖像算法的前置步驟或基礎,掌握圖像濾波對理解卷積神經網絡也有一定幫助。

原创 Datawhale 計算機視覺基礎-圖像處理(上)-Task03 彩色空間互轉

簡介 圖像彩色空間互轉在圖像處理中應用非常廣泛,而且很多算法只對灰度圖有效;另外,相比RGB,其他顏色空間(比如HSV、HSI)更具可分離性和可操作性,所以很多圖像算法需要將圖像從RGB轉爲其他顏色空間,所以圖像彩色互轉是十分重要

原创 Datawhale 計算機視覺基礎-圖像處理(上)-Task02 幾何變換

簡介 該部分將對基本的幾何變換進行學習,幾何變換的原理大多都是相似,只是變換矩陣不同,因此,我們以最常用的平移和旋轉爲例進行學習。在深度學習領域,我們常用平移、旋轉、鏡像等操作進行數據增廣;在傳統CV領域,由於某些拍攝角度的問題,

原创 Datawhale 計算機視覺基礎-圖像處理(上)-Task01 OpenCV框架與圖像插值算法

簡介 在圖像處理中,平移變換、旋轉變換以及放縮變換是一些基礎且常用的操作。這些幾何變換並不改變圖象的象素值,只是在圖象平面上進行象素的重新排列。在一幅輸入圖象[u,v][u,v][u,v]中,灰度值僅在整數位置上有定義。然而,輸出

原创 KDD Cup 2020 Challenges for Modern E-Commerce Platform: 求組隊

如題,本人後臺開發,自學過基本的機器學習和深度學習,如果想組隊打比賽不妨一起哈~    

原创 自然語言處理:bert 用於問答系統

原文:Question Answering with a Fine-Tuned BERT 本文介紹了bert用於問答系統的原理,還有實踐的代碼,可以參考下,以下是原文的翻譯: BERT 在問答系統中的表現達到人類水平意味着什麼?BERT

原创 leveldb源碼學習之基本數據結構Slice

slice用於表示字符串,包括length和一個指向外部字節數組的指針。和string一樣,允許字符串中包含’\0’。 提供一些基本接口,可以把const char*和string轉換爲Slice;把Slice轉換爲string,取得數據

原创 leveldb源碼學習之 DBImpl 類(恢復日誌到memtable:Recover)

推薦結合 leveldb-handbook 閱讀源碼 數據庫每次啓動時,都會有一個recover的過程,簡要地來說,就是利用Manifest信息重新構建一個最新的version。 過程如下: 利用Current文件讀取最近使用的mani

原创 leveldb源碼學習之LRU Cache

推薦結合 leveldb-handbook 閱讀源碼 Leveldb內部通過雙向鏈表實現了一個標準版的LRUCache include/leveldb/cache.h // Cache 是將key映射爲value的接口. 有內部同步機

原创 數據挖掘實戰:特徵工程python實戰

特徵工程是數據科學和機器學習中的重要技巧,對機器模型性能和EDA(exploratory data analysis)的質量有重要影響。本文介紹幾種特徵工程技巧 詳見 notebook 目錄什麼是特徵工程數據集缺失值處理類別特徵