原创 ValueError: Shape must be rank 0 but is rank 1 for ‘Adam/update_weight/ApplyAdam‘ (op: ‘ApplyAdam‘)

原代碼: self.lr = tf.placeholder(shape=[1],dtype=tf.float32,name="learning_rate") 。。。 。。。 optimizer = tf.train.A

原创 大數據路上的bug坑

1、[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.5:compile (default-compile) on proje

原创 服務器搭建hadoop集羣

環境 使用 centos 作爲系統環境,基於原生 Hadoop 2,在 Hadoop 2.7.x版本下驗證通過,可適合任何 Hadoop 2.x.y 版本,例如 Hadoop 2.7.1,Hadoop 2.4.1 等。 本教程簡單的使用兩

原创 ubuntu18.04首次配置hadoop僞分佈式以及出現的問題

1、搞明白單機、僞分佈式和集羣的區別 單機:也稱非分佈式,是直接讀寫本地操作系統的文件系統,一般僅用於本地MR程序的調試。直接解壓hadoop包就行,無需配置。 僞分佈式:在一臺單機上運行,但用不同的Java進程模仿分佈式運行中的各類結點

原创 sklearn.cross_val_score和sklearn.roc_auc_score

1、sklearn.model_selection.cross_val_score(estimator, X, y=None, groups=None, scoring=None, cv=None, n_jobs=None, verbos

原创 vanilla RNNs和LSTM和GRU公式推導相關

1、 vanilla RNNs  文章轉自https://blog.csdn.net/dchen1993/article/details/53885490 相比於LSTM、GRU,vanilla RNNs 是最簡單的循環神經網絡。 RNN

原创 Spark中dataframe裏data.drop()和data.na.drop()的區別

問題描述:原始數據data總行數是1303638,使用data.drop()後數據總行數是1303638,使用data.na.drop()後數據總行數是0;爲啥data.drop()沒有丟棄null或nan的數據? 總結:     1)d

原创 GPU的使用

1、bash中 ## bash 設定GPU卡順序:export CUDA_DEVICE_ORDER = "PCI_BUS_ID" 指定第1塊和第2塊GPU卡:export CUDA_VISIBLE_DEVICES="0,1"  2、py

原创 Python錯誤:TypeError: 'list' object is not callable

錯誤原因 1、在調用某個函數時,報該錯誤;從錯誤提示可以看出,調用的函數是"list"類型,所以原因是代碼中有變量名與函數名重複。 點贊 收藏 分享 文章舉報 gyl2016