原创 Tensorflow版本問題的一系列報錯解決方案

一下的報錯均是由於將tensorflow1版本的代碼遷移到tensorflow2上產生的錯誤,主要是一些api的改動。 File "D:\python\paperRecurrence\CasRel\CasRel-master\mod

原创 聚類算法之K-means算法與聚類算法衡量指標

    聚類就是按照某個特定標準(如距離準則)把一個數據集分割成不同的類或簇,使得同一個簇內的數據對象的相似性儘可能大,同時不在同一個簇中的數據對象的差異性也儘可能地大。即聚類後同一類的數據儘可能聚集到一起,不同數據儘量分離。聚類算法屬於

原创 神經網絡訓練細節(二)

一、神經網絡優化  SGD的問題 隨機梯度下降可能是在機器學習和深度學習中應用最爲廣泛的優化算法,但其有時學習會非常慢,特別是當梯度在水平和豎直方向上不均衡時,如下圖所示: 在豎直方向上,梯度下降很快,而在水平方向上,梯度下降比較慢。

原创 DataFrame刪除行和列

本文通過一個csv實例文件來展示如何刪除Pandas.DataFrame的行和列數據文件名爲:example.csv內容爲: date spring summer autumn winter 2000 12.233

原创 kaggle Santander Customer Transaction Prediction總結

記一次失敗的競賽經歷 數據分析 1.樣本不均衡。在20萬訓練數據集中,正樣本(y=1)爲2萬,負樣本(y=0)爲18萬。 2.所有原始特徵之間相關性很小。這一點很奇怪,很少有數據集所有特徵之間相關性都很小的。 3.所有特徵的分佈都類似。這

原创 Bagging與隨機森林

一、Bagging算法 Bagging是並行集成學習方法最著名的代表,可以用來提高學習算法準確度的方法,這種方法通過構造一個預測函數系列,然後以一定的方式將它們組合成一個預測函數。Bagging要求“不穩定”(不穩定是指數據集的小的變動

原创 kaggle Titanic泰坦尼克

作者: 寒小陽 出處:http://blog.csdn.net/han_xiaoyang/article/details/49797143 1.引言 先說一句,年末雙十一什麼的一來,真是非(mang)常(cheng)歡(go

原创 XGBoost python調參指南

在analytics vidhya上看到一篇<Complete Guide to Parameter Tuning in XGBoost in Python>,寫的很好。因此打算翻譯一下這篇文章,也讓自己有更深的印象。具體內容

原创 機器學習提升算法之Adaboost、GB、GBDT與XGBoost算法

一、提升算法概論 Boosting(提升)是一族可將弱學習器提升爲強學習器的算法。提升算法基於這樣一種思想:對於一個複雜的任務,將多個專家的判斷總和得出的結果要比任何一個專家單獨的判斷好。這族算法的工作機制類似:先從初始訓練集訓練出一個

原创 貝葉斯網絡

一、貝葉斯網絡概述         貝葉斯網絡是一種概率網絡,它是基於概率推理的圖形化網絡,而貝葉斯公式則是這個概率網絡的基礎。一個貝葉斯網絡是一個有向無環圖(Directed Acyclic Graph,DAG),由代表變量節點及連

原创 Python3下使用matplotlib畫圖添加中文註釋亂碼解決

Matplotlib是Python的一個很好的繪圖包,但是其本身並不支持中文(貌似其默認配置中沒有中文字體),所以如果繪圖中出現了中文,就會出現亂碼。 在《用Python作科學計算》一書中,有一個最小二乘擬合的例子,我用Pytho

原创 CNN卷積神經網絡層級結構

卷積神經網絡層次結構包括: 數據輸入層/ Input layer 卷積計算層/ CONV layer 激勵層 / ReLU layer 池化層 / Pooling layer 全連接層 / FC layer 輸入層(Input

原创 pytorch報錯RuntimeError: DataLoader worker (pid(s) 7872, 15356, 19144, 16296) exited unexpectedly

Traceback (most recent call last): File "D:/python/Dive into DL/pytorch/CH3/softmax.py", line 42, in <module> pr

原创 神經網絡訓練細節(一)

一、激勵函數的選取  常見的激勵層函數有sigmoid、tanh、Relu、Leaky Relu、ELU、Maxout sigmoid函數如下所示: sigmoid函數是早期用的比較多的激勵函數,但現在已經不常用了。主要是當輸入特別

原创 可汗學院金融學(一)

利息 利息計算公式 p:本金,y:年數,r:利率 單利計算公式:p(1+r*y) 複利計算公式:p(1+r)^y 現值 現值(Present Value):假設我現在可以給你100美元或者1年後給你110美元,你應該如何選擇(假設是