原创 Postgresql+ArcGIS數據對接

What 電腦A上裝數據庫PostgreSQL 電腦B通過ArcGIS遠程訪問電腦A數據庫 How 電腦A(Ubuntu/Linux服務器端) Linux下PostgreSQL安裝配置 安裝postgresql sudo a

原创 Parallel Python 並行計算

原文鏈接 http://www.cnblogs.com/flyingis/archive/2009/11/12/1601574.html 作者: Flyingis 最近在關注如何提升Python執行效率的問題,自己沒有

原创 python讀取txt文件最後一行(文件大+文件小)

txt文件小 #coding:utf-8 ''' fname爲所讀xx.txt文件 輸出爲:文件第一行和最後一行 ''' fname = 'test.txt' with open(fname, 'r') as f: #打開文件

原创 安裝系統後鼠標不能動

安裝系統後鼠標不能動 1.USB設置 inter xHCI模式 智能自動改爲關閉或自動 2.USB設置 警用USB Legacy Support 點贊 收藏 分享 文章舉報

原创 Python2 編碼

輸入 -> str -> decode -> unicode -> encode -> str -> 輸出 點贊 收藏 分享 文章舉報 金帛文武在南京 發佈了31 篇原

原创 python奧義

鍵入下面代碼: import this The Zen of Python, by Tim Peters Beautiful is better than ugly. Explicit is better than

原创 Hadoop集羣redhad離線安裝Hive

參考文檔 http://dblab.xmu.edu.cn/blog/install-hive/ Ubuntu安裝hive,並配置mysql作爲元數據庫 http://www.bkjia.com/Mysql/1093428.html

原创 Zookeeper分佈式服務框架

原文鏈接:https://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/ 許 令波, Java 工程師, 淘寶網  分佈式服務框架 Zookeeper -- 管理分

原创 rdd不能嵌套rdd

df_all.show() a = [(1,df_all)] rdd = sc.parallelize(a) 報錯 Py4JError: An error occurred while calling o131.__getne

原创 spark集羣1.6.2升級爲2.0.2

參考文檔 http://dblab.xmu.edu.cn/blog/1187-2/ Spark 2.0分佈式集羣環境搭建 http://blog.csdn.net/andy572633/article/details/7211546

原创 最大子序列和問題

原文鏈接 在hust快樂的學習 http://blog.csdn.net/hs794502825/article/details/7956730 問題描述: 給定一個整數序列,a0, a1, a2, …… , an(項可以爲負數)

原创 REST、SOAP、RPC概念認識

原文出處:blog.csdn.net/tantexian SOA: 維基百科解釋:SOA:面向服務的軟件架構(Service Oriented Architecture),是一種計算機軟件的設計模式,主要應用於不通應

原创 數據清洗經驗

數據爲什麼需要清洗 字段缺失 前後結構不一致 數據取值範圍不對 不是易於分析的格式 清洗數據技巧 使用斷言 Assertions 例如每條記錄有4個字段,斷言之; 某個字段是整數,斷言之。反正,能斷言的都斷言,不要嫌麻煩。 對於不

原创 Hadoop實現表間關聯

輸入數據 第一列:child 第二列:parent 輸出數據 根據輸入數據的父子關係,輸出grandchild 和 grandparent 表格 第一列:grandchild 第二列:grandparent 代碼 package

原创 MapReduce之輸入輸出類型

使用Combiner遇到錯誤 找到原因:Mapper與Combiner的輸出均要與Reducer對應 轉載:http://blog.csdn.net/lucktroy/article/details/7957120