原创 十二、java調試

Java Eclipse進行斷點調試 如何調試Java程序? 大家最開始學習Java,都會覺得IDE調試好高端有木有,其實很簡單了。 下文會盡量簡單直觀的教會你在Eclipse中調試,其他的IDE調試步驟也是類似的。 1.在你覺得有錯的地

原创 十四、正則

正則就是說正確的規則,本身也屬於字符串裏面的內容,首先的第一步就是創建一個模板:String regex="正則模板";   組成:轉義字符“\”        元字符(\d:表示0-9) 點贊 收藏 分享

原创 十三、異常

需要強調的是:throwable-error exception-運行時還有非運行時 throws throw在獨立的方法裏面 try catch finally在住運行的方法   Java異常處理和設計   在程序設計中,進行異常處理

原创 4、Spark中application、job、stage、tast之間的關係詳解

SparkControlProcesses Driver Application entry point that contains the SparkContext instance

原创 5、在Yarn上運行Spark-Shell和Spark-SQL命令行

原文鏈接:https://blog.csdn.net/ggz631047367/article/details/50445897/ 如果你已經有一個正常運行的Hadoop Yarn環境,那麼只需

原创 3、Spark運行原理解析一

一、Spark核心API ---------------------------------------------------------------------------------------------- [SparkConte

原创 Spark學習:spark-shell和spark-submit的區別及各自工作

一、異同    1、相同點:放置的位置都在/spark/bin目錄下面    2、不同點:         (1)、spark-shell本身是交互式的,dos界面上會提供一種類似於IDE的開發環境,開發人員可以在上面進行編程。在運行時,

原创 Hadoop命令行運行自己生成的jar包

hadoop jar     /path/wordcount.jar(輸入參數是兩條路徑)      /fileAlready.txt      /countResultFolder

原创 大數據1:雲計算:PAAS、IAAS和SAAS之間的區別

 1.IAAS: 用戶通過Internet 可以從完善的計算機基礎設施獲得服務。這類服務可以稱爲基礎設施即服務。  2.PAAS:提供了用戶可以訪問的完整或部分的應用程序開發,這類服務可以稱爲平臺即服務。  3.SAAS:提供了用戶可以訪

原创 1、在eclipse或者idea下面調用hadoop接口開發hadoop應用程序

方式一、首先爲hadoop和eclipse創建類似於(tomcat和eclipse的插件關係):具體而言,        首先將於安裝好的hadoop版本一致的hadoop-eclipse-xxx.jar拷貝到eclipse的plugin

原创 1、Linux中屬主和屬組的關係

對於文件來說,它都有一個特定的所有者,也就是對該文件具有所有權的用戶。 同時,在Linux系統中,用戶是按組分類的,一個用戶屬於一個或多個組。 文件所有者以外的用戶又可以分爲文件所有者的同組用戶和其他用戶。 因此,Linux系統按文件所有

原创 十七、泛型以及數組相結合

使用了泛型 對於數組:int array[]=new int[10];但是要知道,實際上的類型是int[],前面的只是一個寫法。    

原创 十六、java註解

注意:一般情況下用不到java自定義註解功能,這是因爲我們一般是在別人定義好的框架下面運行程序,只要掌握了別人定義好的框架的運行規律和運行規則就已經足夠了 @是java註解,即annotation。 1可以理解爲插件

原创 二十四、spring\springMVC\mybatis整合

注意:從其他地方拷貝進來一個javaweb工程: 首先build path新的jdk,其次導入相應的資源文件jar包,其次選擇適合的tomcat版本,最後在項目的properties中設置project facet補充:1、對於sprin

原创 三十、揹包問題

java實現最通俗易懂的01揹包問題 這幾天一直在想揹包問題,昨天還有個學長專門講了,但是還是不是很理解,今天我終於想通了揹包問題,其實只要理解了這個思路,不管用什麼語言,肯定是能編出來的。下面我就來介紹一下揹包問題。 1.題目描述: 有