hive編程指南——讀書筆記(無知拾遺)
set hive.metastore.warehouse.dir=/user/myname/hive/warehouse;
用戶設定自己的數據倉庫目錄。不影響其他用戶。也在$HOME/.hiverc中設置,則每次啓動hive自動加載
hive -(d,ef,H,h,i,p,S,v)
定義變量var,在hql中直接引用${var}
set (顯示或修改)
set; (看所有變量)
set env:HOME;
set -V;
不加-V打印命名空間
hive --define foo=bar (-d簡寫)
set foo (查看變量)
set hivevar:foo=bar2(重賦值)
set hivevar:foo (查看)
hive -S -e "select * from..." (-S是靜默模式,去掉ok、time taken等輔助輸出信息,只保留查詢結果)
hive -f 等同於 source
hive -i 指定hive初始化時加載文件。沒有就自動加載$HOME/.hiverc中設置,則每次啓動hive自動加載
$HOME/.history 歷史100條命令
CLI(hive shell)中 用! 執行shell命令
顯示字段名稱 set hive.cil.print.header=true;
字符串s 轉整型 cast(s as int)
分隔符 ^A(\001)^B(\002)^C(\001) 級別遞減,列,字段內元素間(如map、struct)分隔,元素的鍵值之間分隔
ROW FORMAT DELIMITED 是操作一行記錄間各字段的分隔,行和STORED不需要
DATABASE操作:
create DATABASE IF NOT EXITS A
LOCATION '$PATH' --創建database會給一個hdfs存儲目錄,以A.db命名的目錄,LOCATION可指定A在hdfs的存儲位置
show databases LIKE 'h*'
另外 WITH添加database的描述
table操作
create table db.A --可以在其他db(非當前db)下建表
COMMENT 添加表說明文檔
TBLPROPERTIES 按鍵值對格式爲表添加額外說明
copy一張表:create mydb.A2 LIKE mydb.A
show tables IN mydb 指定db下的表
show tables 'A*' 過濾出指定的類似表
desc formatted/extended mytable
分區:
用戶設定自己的數據倉庫目錄。不影響其他用戶。也在$HOME/.hiverc中設置,則每次啓動hive自動加載
hive -(d,ef,H,h,i,p,S,v)
定義變量var,在hql中直接引用${var}
set (顯示或修改)
set; (看所有變量)
set env:HOME;
set -V;
不加-V打印命名空間
hive --define foo=bar (-d簡寫)
set foo (查看變量)
set hivevar:foo=bar2(重賦值)
set hivevar:foo (查看)
hive -S -e "select * from..." (-S是靜默模式,去掉ok、time taken等輔助輸出信息,只保留查詢結果)
hive -f 等同於 source
hive -i 指定hive初始化時加載文件。沒有就自動加載$HOME/.hiverc中設置,則每次啓動hive自動加載
$HOME/.history 歷史100條命令
CLI(hive shell)中 用! 執行shell命令
顯示字段名稱 set hive.cil.print.header=true;
字符串s 轉整型 cast(s as int)
分隔符 ^A(\001)^B(\002)^C(\001) 級別遞減,列,字段內元素間(如map、struct)分隔,元素的鍵值之間分隔
ROW FORMAT DELIMITED 是操作一行記錄間各字段的分隔,行和STORED不需要
DATABASE操作:
create DATABASE IF NOT EXITS A
LOCATION '$PATH' --創建database會給一個hdfs存儲目錄,以A.db命名的目錄,LOCATION可指定A在hdfs的存儲位置
show databases LIKE 'h*'
另外 WITH添加database的描述
table操作
create table db.A --可以在其他db(非當前db)下建表
COMMENT 添加表說明文檔
TBLPROPERTIES 按鍵值對格式爲表添加額外說明
copy一張表:create mydb.A2 LIKE mydb.A
show tables IN mydb 指定db下的表
show tables 'A*' 過濾出指定的類似表
desc formatted/extended mytable
分區:
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.