原创 ExDate Oracle 數據庫優化的原則和方法

Oracle db開發的時候,對SQL性能質量的優化成本遠比在後期的成本要低。作爲數據庫開發人員,很應該有寫高性能sql意識習慣。比如,訪問表的方式有全表掃描和通過ROWID訪問表,可以不走全表掃描可以完成的,就儘量規避提升性能。SQL語

原创 HiveQL操作簡要 數據庫和表的相關

--01建數據庫 CREATE DATABASE IF NOT EXISTS DATABASE_NAME; --02查詢數據庫 SHOW DATAB

原创 基於HIVE數據庫出報表的後臺相關工具介紹

1.      Sqoop 是讓hadoop技術支持的clouder公司開發的一個在關係數據庫和hdfs,hive之間數據導入導出的一個工具. 2.      SQLyog SQLyog 是業界著名的 Webyog 軟件公司出品的一款簡

原创 Hadoop 上的HIVE,HBase和Pig Latin 數據流編程語言

hive是基於hadoop的數據倉庫。 Hive是一種建立在Hadoop文件系統上的數據倉庫架構,對存儲在HDFS中的數據進行分析和管理工具。     HBase是一個分佈式的、面向列的開源數據庫。HBase – Hadoop Datab

原创 HIVE 小技巧

1.hive 從虛擬表查詢多行記錄。 在初始化特定數據的時候,可以作爲一個子查詢表做關聯動作。 SELECT explode(ARRAY(1,2,3)) FROM dual; 2.hive 的join 的優化 在關聯表的時候,爲了讓查詢更

原创 計算機4大核心課程

計算機考研裏面,計算機408囊括了4個學科,數據結構,計算機組成原理和計算機網絡網絡安全。從這個側面更客觀地知道,這些是計算機科學與技術的核心課程。 計算機組成原理:講計算機從底層開始講述其原理。 數據結構:講述數據和組織數據的算法。 計

原创 《徹底搞定C 指針》 觀後感和摘要

姚雲飛先生的大作《徹底搞定C 指針》是互聯網上中文C/C++ 界內爲數不多的專門闡述C 指針問題的優秀文獻資源之一。 本文爲觀後感和摘要。 先看代碼段: char  a,*pa;  a = 10;  pa = &a;  *pa = 20;

原创 Hive之insert into 和insert overwrite

insert into 和overwrite的用法: INSERT INTO TABLE tablename1 [PARTITION \ (partcol1=val1, partcol2=val2 ...)] \ select_stat

原创 Oracle ETL 開發 與 計算機核心課程的思考

       我是一個計算機本科畢業生,實習工作已有一年多。去年3月份出來實習,到現在快到五一。        先談談工作。工作中,我主要是按照需求文檔來完成開發任務。開發中,主要寫PL sql,開發DataStage,還有一些項目的其他

原创 Oracle 日誌的編寫與查詢的一種方法(還沒寫完)

sp日誌的編寫與查詢 在數據量大的數據操作的時候,如果我們想通過日誌來記錄當前session下的,那些數據操作進行到哪一步的時候,就需要用到等級日誌

原创 Oracle plsql 按來源進行分區插入下級對應分區分區,鎖表。

一張表可以用一個字段爲什麼值的時候插進對應分區,這就是一分區的方法。但是如果你插入的時候,知道這一段插入是到那個分區的,如果你有並行的插入的話 有可能會出現鎖表。所以你在插入的時候,可以寫插入表 的對應分區,就是在 insert tabl

原创 英語學習

在大學的時候想去參加work&travel USA的,那時候也是因爲大學自己沒錢,家裏肯定也不會支持需要這麼多錢的實踐活動的(好像要2w),而且英語水平也菜,後來也就沒去了。如果有機會還是想去一下的,懂英語肯定是很好的了。 大學4年英語還

原创 ETL

ETL (數據倉庫技術)  ETL,是英文 Extract-Transform-Load 的縮寫,用來描述將數據從來源端經過抽取(extract)、轉換(transform)、加載(load)至目的端的過程。ETL一詞較常用在數據倉庫,

原创 常用軟件

1.PowerDesigner PowerDesigner最初由Xiao-Yun Wang(王曉昀)在SDP Technologies公司開發完成。PowerDesigner是Sybase的企業建模和設計解決方案,採用模型驅動方法,將業

原创 Oracle plsql developer 使用技巧

Oracle plsql developer 使用技巧 配置自己需要的格式,其他執行修飾。 按住alt可以矩形copy,粘貼的時候也是會將對應的矩形進行覆蓋。 用戶自定義快捷鍵。 用戶自定義快捷輸入特定字符。 進行批量重複腳本的編寫的時候