原创 Hadoop數據類型
Writable類 Hadoop將許多Writable類歸入org.apache.hadoop.io包。形成如下圖所示的類層次結構。 Writable的Java基本類封裝 除char類型以外,所有的原生類型都有對應的Writable
原创 農夫過河問題
問題:有一人帶着狼羊菜來到河的左岸欲乘一隻小船過到右岸,每次人只能帶其中一個過河,當有人在不會有事,當無人在時,就不允 許狼和羊在一起,也不允許羊和菜在一起,設計算法以最少的次數過河? 採用位向量,4個二進制位的0/1情況表示狀態,顯而
原创 MapReduce自定義輸入格式
輸入數據如下,是一個Excel表,具體數據是一個月內上網產生的流量記錄,我們要做的是統計24小時每一小時的總流量。 統計結果如下: 首先使用apache poi解析Excel表格(測試數據在這裏下載),每一行數據以tab隔開組成一
原创 hadoop面試題目
1 . 找共同朋友,數據格式如下A B C D E F B A C D E C A B E D A B E E A B C D F A第一字母表示本人,其他是他的朋友,找出有共同朋友的人,和共同朋友是誰答案如下: AB E:C:D AC
原创 Linux下定時備份數據庫
1.創建備份用戶 create user 'db_backup'@'%' identified by 'db_backup_password'; -- 賦zd_setmeal庫只讀權限 grant select on zd_setmea
原创 SpringBoot中使用WebSocket
整個過程如下: 1.添加依賴 2.注入ServerEndpointExporter 3.編寫WebSocket接口 4.在業務中調用 5.前端js 以下開始: 1.添加依賴 <dependency> <groupId>org.spri
原创 Ubuntu14.04配置Nginx+PHP
安裝Nginx與php5、php-fpm apt-get install nginx nginx-extras php5 php5-fpm 修改PHP配置文件 vim /etc/php5/fpm/pool.d/www.conf #修改
原创 Spring-data-jpa 分頁查詢
由於直接調用的JpaRepository的方法,這裏就不貼出Repository的方法了,以下是Service和Controller的方法。 //Service public Page<Ip> list(Integer pageNum,
原创 Ubuntu下Nginx配置Https
1.安裝 Nginx apt-get install -y nginx 2.添加package repository add-apt-repository ppa:certbot/certbot apt-get update3.安裝
原创 Ubuntu下安裝Elasticsearch並同步MySQL數據
0.環境及各軟件版本: Ubuntu 16.04 Server Elasticsearch 5.6.1 MySQL 5.7 JDK 1.8 (已安裝不在這裏贅述) golang 1.6 go-mysql-elasticsearch(數
原创 使用Jsoup採集拉勾網招聘信息
本文使用Jsoup採集拉勾網招聘數據並寫入CSV文件中,實現非常簡單,在此不做多餘的解釋,如有問題可留言交流。 數據模型:job.java package xyz.baal.jsoup; public class Job {
原创 創建一個推薦程序
本文介紹推薦程序的簡單創建與常用接口/類的簡單介紹,深入學習請參考文中的擴展鏈接與mahout官網。 1.輸入文件item.csv 數據格式:用戶ID、物品ID、偏好值 1,101,5.0 1,102,3.0 1,103,2.5 2,1
原创 CentOS/Ubuntu使用sar監控性能
本文轉自:http://www.leonardoborda.com/blog/how-to-configure-sysstatsar-on-ubuntudebian/ CentOS下 yum install -y sysstat sy
原创 深入理解Java關鍵字
此處僅收藏本人在理解這些關鍵字時覺得不錯的博文。 static: http://www.cnblogs.com/WuXuanKun/p/6220964.html http://blog.csdn.net/Zhangxichao1
原创 MySQL用戶權限分配問題
1.創建數據庫idoge_show,用於分配權限 -- 創建數據庫 create database idoge_show; 2.創建用戶idoge,密碼1EHllOnPetjpMOua -- 創建用戶,且無登陸限制 create u