原创 Hadoop數據類型

Writable類 Hadoop將許多Writable類歸入org.apache.hadoop.io包。形成如下圖所示的類層次結構。 Writable的Java基本類封裝 除char類型以外,所有的原生類型都有對應的Writable

原创 農夫過河問題

問題:有一人帶着狼羊菜來到河的左岸欲乘一隻小船過到右岸,每次人只能帶其中一個過河,當有人在不會有事,當無人在時,就不允 許狼和羊在一起,也不允許羊和菜在一起,設計算法以最少的次數過河? 採用位向量,4個二進制位的0/1情況表示狀態,顯而

原创 MapReduce自定義輸入格式

輸入數據如下,是一個Excel表,具體數據是一個月內上網產生的流量記錄,我們要做的是統計24小時每一小時的總流量。 統計結果如下: 首先使用apache poi解析Excel表格(測試數據在這裏下載),每一行數據以tab隔開組成一

原创 hadoop面試題目

1 . 找共同朋友,數據格式如下A B C D E F B A C D E C A B E D A B E E A B C D F A第一字母表示本人,其他是他的朋友,找出有共同朋友的人,和共同朋友是誰答案如下: AB E:C:D AC

原创 Linux下定時備份數據庫

1.創建備份用戶 create user 'db_backup'@'%' identified by 'db_backup_password'; -- 賦zd_setmeal庫只讀權限 grant select on zd_setmea

原创 SpringBoot中使用WebSocket

整個過程如下: 1.添加依賴 2.注入ServerEndpointExporter 3.編寫WebSocket接口 4.在業務中調用 5.前端js 以下開始: 1.添加依賴 <dependency> <groupId>org.spri

原创 Ubuntu14.04配置Nginx+PHP

安裝Nginx與php5、php-fpm apt-get install nginx nginx-extras php5 php5-fpm 修改PHP配置文件 vim /etc/php5/fpm/pool.d/www.conf #修改

原创 Spring-data-jpa 分頁查詢

由於直接調用的JpaRepository的方法,這裏就不貼出Repository的方法了,以下是Service和Controller的方法。 //Service public Page<Ip> list(Integer pageNum,

原创 Ubuntu下Nginx配置Https

1.安裝 Nginx apt-get install -y nginx 2.添加package repository add-apt-repository ppa:certbot/certbot apt-get update3.安裝

原创 Ubuntu下安裝Elasticsearch並同步MySQL數據

0.環境及各軟件版本: Ubuntu 16.04 Server  Elasticsearch 5.6.1 MySQL 5.7 JDK 1.8 (已安裝不在這裏贅述) golang 1.6 go-mysql-elasticsearch(數

原创 使用Jsoup採集拉勾網招聘信息

本文使用Jsoup採集拉勾網招聘數據並寫入CSV文件中,實現非常簡單,在此不做多餘的解釋,如有問題可留言交流。 數據模型:job.java package xyz.baal.jsoup; public class Job {

原创 創建一個推薦程序

本文介紹推薦程序的簡單創建與常用接口/類的簡單介紹,深入學習請參考文中的擴展鏈接與mahout官網。 1.輸入文件item.csv 數據格式:用戶ID、物品ID、偏好值 1,101,5.0 1,102,3.0 1,103,2.5 2,1

原创 CentOS/Ubuntu使用sar監控性能

本文轉自:http://www.leonardoborda.com/blog/how-to-configure-sysstatsar-on-ubuntudebian/ CentOS下 yum install -y sysstat sy

原创 深入理解Java關鍵字

此處僅收藏本人在理解這些關鍵字時覺得不錯的博文。 static: http://www.cnblogs.com/WuXuanKun/p/6220964.html http://blog.csdn.net/Zhangxichao1

原创 MySQL用戶權限分配問題

1.創建數據庫idoge_show,用於分配權限 -- 創建數據庫 create database idoge_show; 2.創建用戶idoge,密碼1EHllOnPetjpMOua -- 創建用戶,且無登陸限制 create u