原创 spark RDD的5個重要內部屬性

RDDs 接口的五個屬性 下表總結了 RDDs 的五個屬性: 上述屬性可以概括爲幾個方面:一組分區,表示數據集包含的分片;一組依賴關係,指向其父 RDD;一個函數,基於父 RDD 進行計算;以及劃分策略和數據位置相關的元數據。

原创 導致的 Access denied for user ''@'localhost' to database 問題

解決辦法: 1、改用以下配置: <bean id= "propertyConfigurer" class= "org.springframework.beans.factory.config.Pr

原创 關於struts2文件上傳中的uploadContentType和uploadFileName

文件上傳頁面中,包含兩個表單域,文件標題和文件瀏覽域——當然,爲了能完成文件上傳,我們應該將這兩個表單域所在表單的enctype屬性設置爲multipart/form-data。該頁面的代碼如下所示: <html xmlns="

原创 Synchronized關鍵字與線程通信

一.等待/通知機制 1.通過wait/notify實現等待/通知機制 wait():可以使調用該方法的線程釋放共享資源的鎖,然後從運行狀態退出,進入等待隊列,直到被再次喚醒 notify():可以隨機

原创 hadoop集羣搭建

兩臺虛擬機 master 192.168.32.128 slave1 192.168.32.129 1.安裝linux系統(我是在Ubuntu系統在搭建的) (可以根據自己的需要創建一個用戶,也可以不創建,由於博主用的是虛

原创 spark集羣部署

1.下載安裝scala scala下載地址 我用的是scala-2.11.8.tgz 然後解壓 sudo tar -zvxf scala-2.11.8.tgz /usr/local cd /usr/local s

原创 簡單的spring mvc 異步登陸驗證

最近接觸到Spring+SpringMVC+Mybatis框架,在登錄驗證方面遇到了一些問題,與struts2有一些區別 1.@Resource private Service service ;非控制器中不能注入 2.不能通

原创 Mybatis插入一條數據後返回剛插入數據主鍵

MyBatis 3.2.6插入時候獲取自增主鍵方法有二(第一種方法親測可行,第二種方法測試沒有通過,有測試通過的小夥伴可以告知一下啦,謝謝咯!!!) 以MySQL5.5爲例: 方法1: <insert id="insert" p

原创 volatile關鍵字

volatile關鍵字的作用:強制從公共堆棧中去取得變量的值,而不是從線程私有數據棧中取得變量的值 volatile能夠實現可見性,但不能實現原子性 參考博客http://www.cnblogs.com/dolphin0520

原创 log4j具體用法

相信我,會有幫助的 點贊 收藏 分享 文章舉報 平凡de世界 發佈了25 篇原創文章 · 獲贊 21 · 訪問量 6萬+ 私信

原创 HttpURLConnection用法詳解

微信開發的時候,經常遇到weixinUtil.java 類和CommonUtil.java類,但是很多的博客都沒有給出這兩個類,我也是很糾結,現將CommonUtil.java類的講解給大家,但是親測是不能成功的(後面會將這兩個類

原创 webmagic入門

webmagic入門鏈接 點贊 收藏 分享 文章舉報 平凡de世界 發佈了25 篇原創文章 · 獲贊 21 · 訪問量 6萬+ 私信

原创 SSM註解錯誤

註解錯誤一般有三種情況: 1. 你的BrandServiceImpl必須以@Service或@Component註解才行。 2。自動寫入的時候把接口寫成實現類了 @Autowired private BrandServi

原创 RDD Stage生成

Stage生成 Stage的調度是由DAGScheduler完成的。由RDD的有向無環圖DAG切分出了Stage的有向無環圖DAG。Stage的DAG通過最後執行的Stage爲根進行廣度優先遍歷,遍歷到最開始執行的Stage執行