原创 org.apache.hadoop.io.nativeio.NativeIOWindows.createDirectoryWithMode0(Ljava/lang/StringI)V

遇到這個錯誤,對於我這種新手來說真的是摸不着頭腦,莫名奇妙。後面搜了很多網上的版本都不行。 最終下載了別人的一個bin,覆蓋了我的bin,後面就可以了。   把我們環境變量的hadoop(我的版本是這個hadoop-2.6.0-cdh5.

原创 hdfs讀寫機制及其checkpoint機制

https://blog.csdn.net/u014253445/article/details/77574319

原创 打 Hadoop-HDFS 基礎回顧

我們每學完一樣東西,最好能用筆記記起來,不要太相信自己的記憶力,我在這方面吃過虧。     回顧一下,HDFS  全稱  Hadoop Distribute File System,顧名思義,分佈式文件系統。 大家想想分佈式本身有什麼優點

原创 分析 HADOOP-HDFS文件儲存機制

  大家看到  hadoop-2.6.0-cdh5.15.1.tar.gz 壓縮包 是400M有餘   我們直接用hadoop fs -put 命令,把包存進HDFS文件系統。 我這邊的版本 block size的默認大小 是128M

原创 HDFS僞分佈式單節點版安裝(cdh版本)

我這邊用的是hadoop-2.60-cdh5.15.1版本 下載Hadoop地址:https://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz   下載下來後:

原创 kafka入門到精通(一) 基本概念

kafka 的作用分爲三個: · 消息系統:Kafka 和傳統的消息系統(也稱作消息中間件)都具備系統解耦、冗餘存儲、流量削峯、緩衝、異步通信、擴展性、可恢復性等功能。與此同時,Kafka 還提供了大多數消息系統難以實現的消息順序性保障及

原创 String 一些理解

先上點題吧 String str1 = "計算機"; String str2 = "計算機"; System.out.println("str1==str2:" + (str1 == st

原创 kafka入門到精通(二) 生產者

先上段簡單的代碼: public static final String brokerList = "X.X.X.X:9092"; public static final String topic = "demo";

原创 Exception和Error 區別

Exception和Error都是繼承了Throwable類,在Java中只有Throwable類型的實例纔可以被拋出(throw)或者捕獲(catch),它是異常處理機制的基本組成類型。 Exception和Error體現了Java平