原创 Hadoop學習--完全分佈式部署(pdsh/include&exclude/安全模式/均衡器/快照/回收站)--day02

安裝準備工作準備5臺服務器,hadoop01部署namenode resourcemanager,hadoop02-hadoop03是datanode,hadoop04部署secondarynamenode   上傳hadoop-2.7.3

原创 Hadoop學習--Mapper Reduce--day08

mapper類的代碼:實現Mapper類的方法import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Lo

原创 Hadoop學習--通過API上傳文件--day04

import java.io.BufferedInputStream;import java.io.BufferedOutputStream;import java.io.ByteArrayOutputStream;import java.

原创 Hadoop學習--AP讀取HDFS數據--day04

import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apache.hadoop.conf.Config

原创 我的友情鏈接

51CTO博客開發

原创 Hadoop學習--seek重定位流--day04

import java.io.ByteArrayOutputStream;import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.Input

原创 Hadoop學習--通過API訪問本地文件系統--day04

import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apache.hadoop.conf.Config

原创 Hadoop學習--設置配置文件參數列出目錄結構--day04

import java.io.ByteArrayOutputStream;import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.Input

原创 Hadoop學習--person類對象的序列化和反序列化--day07

person類的代碼:import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;import org.apache.hadoop.io.Boo

原创 Hadoop學習--int類型的序列化和反序列化--day07

import java.io.ByteArrayInputStream;import java.io.ByteArrayOutputStream;import java.io.DataInputStream;import java.io.D

原创 Hadoop學習--上傳文件指定複製因子--day04

import java.io.ByteArrayOutputStream;import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.Input

原创 Hadoop學習--通過API得到文件系統狀態--day04

import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apache.hadoop.conf.Config

原创 Hadoop學習--通過配置文件修改文件副本數塊大小--day04

import java.io.ByteArrayOutputStream;import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.Input

原创 Hadoop學習--HA配置(不含zookeeper)--day05

1.HA配置(1).high availability,高可用       持續服務的能力       多臺主機之間進行集羣配置(2).failover,容災(3).namenode  , 2nn    secondary namenode

原创 Hadoop學習--URL方法訪問HDFS數據--day04

import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apache.hadoop.fs.FsUrlStr