原创 Postgresql+ArcGIS數據對接
What 電腦A上裝數據庫PostgreSQL 電腦B通過ArcGIS遠程訪問電腦A數據庫 How 電腦A(Ubuntu/Linux服務器端) Linux下PostgreSQL安裝配置 安裝postgresql sudo a
原创 Parallel Python 並行計算
原文鏈接 http://www.cnblogs.com/flyingis/archive/2009/11/12/1601574.html 作者: Flyingis 最近在關注如何提升Python執行效率的問題,自己沒有
原创 python讀取txt文件最後一行(文件大+文件小)
txt文件小 #coding:utf-8 ''' fname爲所讀xx.txt文件 輸出爲:文件第一行和最後一行 ''' fname = 'test.txt' with open(fname, 'r') as f: #打開文件
原创 安裝系統後鼠標不能動
安裝系統後鼠標不能動 1.USB設置 inter xHCI模式 智能自動改爲關閉或自動 2.USB設置 警用USB Legacy Support 點贊 收藏 分享 文章舉報
原创 Python2 編碼
輸入 -> str -> decode -> unicode -> encode -> str -> 輸出 點贊 收藏 分享 文章舉報 金帛文武在南京 發佈了31 篇原
原创 python奧義
鍵入下面代碼: import this The Zen of Python, by Tim Peters Beautiful is better than ugly. Explicit is better than
原创 Hadoop集羣redhad離線安裝Hive
參考文檔 http://dblab.xmu.edu.cn/blog/install-hive/ Ubuntu安裝hive,並配置mysql作爲元數據庫 http://www.bkjia.com/Mysql/1093428.html
原创 Zookeeper分佈式服務框架
原文鏈接:https://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/ 許 令波, Java 工程師, 淘寶網 分佈式服務框架 Zookeeper -- 管理分
原创 rdd不能嵌套rdd
df_all.show() a = [(1,df_all)] rdd = sc.parallelize(a) 報錯 Py4JError: An error occurred while calling o131.__getne
原创 spark集羣1.6.2升級爲2.0.2
參考文檔 http://dblab.xmu.edu.cn/blog/1187-2/ Spark 2.0分佈式集羣環境搭建 http://blog.csdn.net/andy572633/article/details/7211546
原创 最大子序列和問題
原文鏈接 在hust快樂的學習 http://blog.csdn.net/hs794502825/article/details/7956730 問題描述: 給定一個整數序列,a0, a1, a2, …… , an(項可以爲負數)
原创 REST、SOAP、RPC概念認識
原文出處:blog.csdn.net/tantexian SOA: 維基百科解釋:SOA:面向服務的軟件架構(Service Oriented Architecture),是一種計算機軟件的設計模式,主要應用於不通應
原创 數據清洗經驗
數據爲什麼需要清洗 字段缺失 前後結構不一致 數據取值範圍不對 不是易於分析的格式 清洗數據技巧 使用斷言 Assertions 例如每條記錄有4個字段,斷言之; 某個字段是整數,斷言之。反正,能斷言的都斷言,不要嫌麻煩。 對於不
原创 Hadoop實現表間關聯
輸入數據 第一列:child 第二列:parent 輸出數據 根據輸入數據的父子關係,輸出grandchild 和 grandparent 表格 第一列:grandchild 第二列:grandparent 代碼 package
原创 MapReduce之輸入輸出類型
使用Combiner遇到錯誤 找到原因:Mapper與Combiner的輸出均要與Reducer對應 轉載:http://blog.csdn.net/lucktroy/article/details/7957120