原创 Spark臨時表tempView的註冊/使用/註銷
【背景】 Spark腳本中可以通過sparkContext.sql("xxxx")的方式直接調用SQL代碼，但其限制是處理的表必須是在spark context中已註冊的臨時表。臨時表不會佔用額外內存，可以理解爲是對內存空間重新命名了
2020-06-25 20:15:57
原创 windows安裝Java JDK教程
目錄 1. jdk下載 2.jdk安裝 3.環境變量配置 4.jdk測試 1. jdk下載 https://www.oracle.com/technetwork/java/javase/downloads/index.html 下載對應系
2020-06-25 20:15:46
原创 win10如何添加開機啓動項
【適用場景】 當你想讓某個程序開機自啓，如微信、網易雲音樂等，但該軟件沒有開機自啓設置。 【設置方法】 將該程序的快捷方式放到以下路徑即可： C:\ProgramData\Microsoft\Windows\Start Menu\Prog
2020-06-25 20:15:46
原创 解決Spark窗口統計函數rank()、row_number()、percent_rank()不能忽略空值問題
目錄 【問題背景】 【解決方法1：計算空值佔比、非空排序最小值，對結果進行映射】 【解決方法2：將排序列單獨選出來，filter空值後再排序】 【解決方法3：進行兩次排序，根據兩次排序結果計算最終結果】 【優缺點對比】 【解決方法推薦】
2020-06-25 20:15:46
原创 TensorBoard菜鳥教程(包含TFlearn例子)
目錄 1. 簡介 2. TnesorBoard啓動 3.代碼解釋 4.補充例子 1. 簡介 網上關於TensorBoard有很多介紹，但作爲一名小白很難操作起來，實現過程中困難重重。本文章從實例解析tensorboard的使用方法。其他文
2020-06-07 20:02:03
1
原创 Windows上TensorFlow、TensorBoard、TFlearn安裝教程
目錄 1、Python安裝 2、Python IDE安裝 3、Cuda安裝 4、TensorFlow’安裝 5、Tflearn安裝方法1： 6、TensorBoard安裝 安裝之前建議先上TensorFlow看看各個模塊的版本要求，免得走
2020-06-07 20:02:03
原创 圖片風格轉換（附TensorFlow代碼）
論文 A NeuralAlgorithm of Artistic Style. 2015 NIPS 思路 （1）網絡結構解析 採用ImageNet數據集預訓練一個VGG19網絡出來，得到網絡結構如下圖： 其中紫色框中的5個layer
2020-06-07 20:02:03
3
原创 非root用戶安裝python第三方模塊出現Permission denied的解決辦法
非root用戶在使用pip安裝模塊的時候，將會報“Permission denied”的錯誤，這是因爲python模塊默認的安裝路徑是/usr/local/lib/python2.7/dist-packages/，這是系統路徑，需要roo
2020-06-07 20:02:03
原创 sklearn特徵工程
參考：使用sklearn做單機特徵工程 1 特徵工程是什麼？ 2 數據預處理 2.1 無量綱化 2.1.1 標準化 2.1.2 區間縮放法 2.1.3 標準化與歸一化的區別 2.2 對定量特徵二值化 2
2020-06-07 20:02:03
原创 Linux提示permission denied或Text file busy解決方法
【Permission denied】 錯誤原因：文件沒有執行權限 解決方法：輸入chmod 777 xxx.sh，改變文件權限 【Text file busy】 錯誤原因：可能是文件被佔用 解決方法1：輸入fuser xxx.sh，
2020-06-07 20:02:03
原创 Eclipse出現 you must restart adb and eclipse的解決辦法
1.打開命令行，輸入 adb kill-server 2.再輸入 adb start-server 3.重啓eclipse 若第二步出現錯誤提示： adb server is out of date. killing...
2020-02-22 04:51:33
原创 計算機視覺數據集大全 - Part2
轉載自http://homepages.inf.ed.ac.uk/rbf/CVonline/Imagedbase.htm Index by Topic Action Databases Agriculture Attribute reco
2020-02-22 04:51:33
1
原创 計算機視覺數據集大全 - Part1
轉載自http://homepages.inf.ed.ac.uk/rbf/CVonline/Imagedbase.htm Index by Topic Action Databases Agriculture Attribute reco
2020-02-22 04:51:33
2
原创 更換jupyter notebook主題
目錄 （1）安裝jupyterthemes （2）查看已有主題 （3）切換主題 （4）啓動jupyter查看效果 （5）重置主題 （6）各主題效果圖 （1）安裝jupyterthemes pip install --upgrade ju
2020-02-22 04:51:33
原创 中文常用停用詞表
目錄 百度停用詞表 哈工大停用詞表 四川大學機器智能實驗室停用詞庫 中文停用詞表 百度停用詞表 -- ? “ ” 》 －－ able about above according accordingly across actually a
2020-02-22 04:51:33