AIX/LINUX
文件分割
split -l 2000000(行) f_PROT_201411.csv


-------------------------
1、查看當前鏈接的數據庫、用戶信息;
db2 connect

2、DB2數據庫登陸
db2 connect to ZMCCDW user "appqry" using "qry.APP1"

3、DB2數據庫導出數據
(http://blog.itpub.net/25744374/viewspace-750571/ 或者 http://henry406.iteye.com/blog/1388887)
db2 export to /home/appqry/test/exp_sampl_staff.ixf of ixf messages /home/appqry/test/msgs.txt select * from dw.DW_NET_URL_570_${data_date} fetch first 10 rows only---導出來是二進制
 

--查詢數據庫使用率
SELECT UPPER(F.TABLESPACE_NAME) "表空間名",
D.TOT_GROOTTE_MB "表空間大小(M)",
D.TOT_GROOTTE_MB - F.TOTAL_BYTES "已使用空間(M)",
TO_CHAR(ROUND((D.TOT_GROOTTE_MB - F.TOTAL_BYTES) / D.TOT_GROOTTE_MB * 100,2),'990.99') || '%' "使用比",
F.TOTAL_BYTES "空閒空間(M)",
F.MAX_BYTES "最大塊(M)"
FROM (SELECT TABLESPACE_NAME,
ROUND(SUM(BYTES) / (1024 * 1024), 2) TOTAL_BYTES,
ROUND(MAX(BYTES) / (1024 * 1024), 2) MAX_BYTES
FROM SYS.DBA_FREE_SPACE
GROUP BY TABLESPACE_NAME) F,
(SELECT DD.TABLESPACE_NAME,
ROUND(SUM(DD.BYTES) / (1024 * 1024), 2) TOT_GROOTTE_MB
FROM SYS.DBA_DATA_FILES DD
GROUP BY DD.TABLESPACE_NAME) D
WHERE D.TABLESPACE_NAME = F.TABLESPACE_NAME
ORDER BY 1

 高效率表空間查詢

     SELECT TABLESPACE_NAME "表空間",
           To_char(Round(BYTES / 1024, 2), '99990.00')
           || 'G'           "實有",
           To_char(Round(FREE / 1024, 2), '99990.00')
           || 'G'          "現有",
           To_char(Round(( BYTES - FREE ) / 1024, 2), '99990.00')
           || 'G'          "使用",
           To_char(Round(10000 * USED / BYTES) / 100, '99990.00')
           || '%'          "比例"
    FROM   (SELECT A.TABLESPACE_NAME                             TABLESPACE_NAME,
               Floor(A.BYTES / ( 1024 * 1024 ))              BYTES,
               Floor(B.FREE / ( 1024 * 1024 ))               FREE,
               Floor(( A.BYTES - B.FREE ) / ( 1024 * 1024 )) USED
        FROM   (SELECT TABLESPACE_NAME TABLESPACE_NAME,
                   Sum(BYTES)      BYTES
            FROM   DBA_DATA_FILES
            GROUP  BY TABLESPACE_NAME) A,
               (SELECT TABLESPACE_NAME TABLESPACE_NAME,
                   Sum(BYTES)      FREE
            FROM   DBA_FREE_SPACE
            GROUP  BY TABLESPACE_NAME) B
        WHERE  A.TABLESPACE_NAME = B.TABLESPACE_NAME)
    /*WHERE TABLESPACE_NAME LIKE 'UNDO%' --這一句用於指定表空間名稱*/
    ORDER  BY Floor(10000 * USED / BYTES) DESC;

select * from (select t.segment_name, sum(t.bytes) / 1024 / 1024/ 1024 as tab_size
  from user_segments t
 group by t.segment_name
 )
 where tab_size>=50
 order by tab_size desc ;


--分區查詢
select 'alter table ' || t.segment_name || ' drop partition ' ||
       t.partition_name || ';'
  from user_segments t
 where t.segment_name = upper('TB_MK_RING_DAY_JF');


----------------------------------BEGIN
表空間

    select /*+parallel(t,16)*/ t.segment_name,sum(t.bytes)/1024/1024/*distinct 'alter table ' || t.segment_name || ' drop partition ' ||
            substr(t.partition_name, 1, 13) || ';'*/
      from sys.dba_segments t
     where  substr(t.partition_name, 6, 13) <= '201401'
       and t.tablespace_name ='TBS_KR'
       group by t.segment_name
       order by sum(t.bytes)/1024/1024 desc
;

--CB層

select /*+parallel(t,16)*/ distinct 'alter table ' || t.segment_name || ' drop partition ' ||
               t.partition_name || ';'
  from sys.dba_segments t
 where (  t.partition_name LIKE '%2013%' or t.partition_name LIKE '%2012%' or t.partition_name LIKE '%2011%'   )
   and t.tablespace_name ='TBS_KR'
   
;
----------------------------------END
--1.查詢被鎖的對象:
select sess.sid,
       sess.serial#,
       lo.oracle_username,
       lo.os_user_name,
       ao.object_name,
       sess.LOGON_TIME,
       lo.locked_mode
  from v$locked_object lo, dba_objects ao, v$session sess
 where ao.object_id = lo.object_id
   and lo.session_id = sess.sid
 order by sess.LOGON_TIME;


SELECT SID,SERIAL#,PADDR FROM V$SESSION WHERE SID='1925'
SELECT SPID FROM V$PROCESS WHERE ADDR='070000078F7EF198';

ALTER SYSTEM KILL SESSION '1925,53292';

SELECT 'kill -9 '||SPID
  FROM V$PROCESS
 WHERE ADDR in (select t.PADDR
                  from v$session t
                 where t.OSUSER = '4A_jianghui11'
                   and T.STATUS = 'ACTIVE'
                 );

kill -9 23978(SPID);
--2. 殺掉被鎖的進程
alter system kill session '1903,64383';


15209

表容量查詢
select /*+parallel(t,4)*/
        round(sum(bytes)/1024/1024/1024,2) "size(g)"  -- 2030.73  1992.46
   from user_segments t                               
  where t.segment_name like 'T%'
  order by "size(g)" desc;


Oracle WHERE條件執行順序 1.ORACLE採用自下而上的順序解析WHERE子句,根據這個原理,表之間的連接必須寫在其他WHERE條件之前, 那些可以過濾掉最大數量記錄的條件必須寫在WHERE子句的末尾. 例如: (低效) SELECT FROM EMP E WHERE SAL 50000 AND JOB = MANAGEROracle WHERE條件執行順序 1.ORACLE採用自下而上的順序解析WHERE子句,根據這個原理,表之間的連接必須寫在其他WHERE條件之前, 那些可以過濾掉最大數量記錄的條件必須寫在WHERE子句的末尾.

例如:

(低效)

SELECT … FROM EMP E WHERE SAL > 50000 AND JOB = ‘MANAGER’ AND 25 < (SELECT COUNT(*) FROM EMP WHERE MGR=E.EMPNO);

(高效)

SELECT … FROM EMP E WHERE 25 < (SELECT COUNT(*) FROM EMP WHERE MGR=E.EMPNO) AND SAL > 50000 AND JOB = ‘MANAGER’;

2.SELECT子句中避免使用’*’

   當在SELECT子句中列出所有的COLUMN時,使用動態SQL列引用 ‘*’ 是一個方便的方法.可是,這是一個非常低效的方法. 實際上,ORACLE在解析的過程中, 會將’*’ 依次轉換成所有的列名, 這個工作是通過查詢數據字典完成的, 這意味着將耗費更多的時間.

3.   使用表的別名(Alias)

當在SQL語句中連接多個表時, 請使用表的別名並把別名前綴於每個Column上.這樣一來,就可以減少解析的時間並減少那些由Column歧義引起的語法錯誤.

(Column歧義指的是由於SQL中不同的表具有相同的Column名,當SQL語句中出現這個Column時,SQL解析器無法判斷這個Column的歸屬)



  ---正在執行的
select a.username, a.sid,b.SQL_TEXT, b.SQL_FULLTEXT
  from v$session a, v$sqlarea b
where a.sql_address = b.address
---執行過的
select b.SQL_TEXT,b.FIRST_LOAD_TIME,b.SQL_FULLTEXT
  from v$sqlarea b
where b.FIRST_LOAD_TIME between '2009-10-15/09:24:47' and
       '2009-10-15/09:24:47' order by b.FIRST_LOAD_TIME
(此方法好處可以查看某一時間段執行過的sql,並且 SQL_FULLTEXT 包含了完整的 sql 語句)
 
其他
select OSUSER,PROGRAM,USERNAME,SCHEMANAME,B.Cpu_Time,STATUS,B.SQL_TEXT
from V$SESSION A LEFT JOIN V$SQL B ON A.SQL_ADDRESS=B.ADDRESS AND A.SQL_HASH_VALUE=B.HASH_VALUE order by b.cpu_time desc
 
select address, sql_text, piece
  from v$session, v$sqltext
where address = sql_address
  -- and machine = < you machine name >
order by address, piece
 
查找前十條性能差的sql.
SELECT * FROM (select PARSING_USER_ID,EXECUTIONS,SORTS,
COMMAND_TYPE,DISK_READS,sql_text FROM v$sqlarea
order BY disk_reads DESC )where ROWNUM<10 ;
 
查看佔io較大的正在運行的session
SELECT se.sid,se.serial#,pr.SPID,se.username,se.status,
se.terminal,se.program,se.MODULE,、se.sql_address,st.event,st.
p1text,si.physical_reads,
si.block_changes FROM v$session se,v$session_wait st,
v$sess_io si,v$process pr WHERE st.sid=se.sid AND st.
sid=si.sid AND se.PADDR=pr.ADDR AND se.sid>6 AND st.
wait_time=0 AND st.event NOT LIKE '%SQL%' ORDER BY physical_reads DESC



oracle 臨時表空間的增刪改查

1、查看臨時表空間 (dba_temp_files視圖)(v_$tempfile視圖)
select tablespace_name,file_name,bytes/1024/1024 file_size,autoextensible from dba_temp_files;
select status,enabled, name, bytes/1024/1024 file_size from sys.v_$tempfile;--sys用戶查看

--查詢佔用情況
SELECT a.tablespace_name, a.BYTES/1024/1024 total, (a.bytes - nvl(b.bytes, 0))/1024/1024 free
  FROM (SELECT   tablespace_name, SUM (bytes) bytes FROM dba_temp_files GROUP BY tablespace_name) a,
       (SELECT   tablespace_name, SUM (bytes_cached) bytes FROM v$temp_extent_pool GROUP BY tablespace_name) b
WHERE a.tablespace_name = b.tablespace_name(+);




 8、查找消耗資源比較的sql語句
    Select se.username,
           se.sid,
           su.extents,
           su.blocks * to_number(rtrim(p.value)) as Space,
           tablespace,
           segtype,
           sql_text
      from v$sort_usage su, v$parameter p, v$session se, v$sql s
     where p.name = 'db_block_size'
       and su.session_addr = se.saddr
       and s.hash_value = su.sqlhash
       and s.address = su.sqladdr
     order by se.username, se.sid
 
9、查看當前臨時表空間使用大小與正在佔用臨時表空間的sql語句
select sess.SID, segtype, blocks * 8 / 1000 "MB", sql_text
  from v$sort_usage sort, v$session sess, v$sql sql
 where sort.SESSION_ADDR = sess.SADDR
   and sql.ADDRESS = sess.SQL_ADDRESS
 order by blocks desc;

--查詢所有臨時表空間情況
select TABLESPACE_NAME, BYTES_USED/1024/1024 used_MB,BYTES_FREE/1024/1024 free_MB
from V$TEMP_SPACE_HEADER;

2、縮小臨時表空間大小
alter database tempfile 'D:\ORACLE\PRODUCT\10.2.0\ORADATA\TELEMT\TEMP01.DBF' resize 100M;

3、擴展臨時表空間:
方法一、增大臨時文件大小:
SQL> alter database tempfile ‘/u01/app/oracle/oradata/orcl/temp01.dbf’ resize 100m;
方法二、將臨時數據文件設爲自動擴展:
SQL> alter database tempfile ‘/u01/app/oracle/oradata/orcl/temp01.dbf’ autoextend on next 5m maxsize unlimited;
方法三、向臨時表空間中添加數據文件:
SQL> alter tablespace temp add tempfile ‘/u01/app/oracle/oradata/orcl/temp02.dbf’ size 100m;

4、創建臨時表空間:
SQL> create temporary tablespace temp1 tempfile ‘/u01/app/oracle/oradata/orcl/temp11.dbf’ size 10M;

5、更改系統的默認臨時表空間:
--查詢默認臨時表空間
select * from database_properties where property_name='DEFAULT_TEMP_TABLESPACE';
--修改默認臨時表空間
alter database default temporary tablespace temp1;
所有用戶的默認臨時表空間都將切換爲新的臨時表空間:
select username,temporary_tablespace,default_ from dba_users;
--更改某一用戶的臨時表空間:
alter user scott temporary tablespace temp;

6、刪除臨時表空間
刪除臨時表空間的一個數據文件:
SQL> alter database tempfile ‘/u01/app/oracle/oradata/orcl/temp02.dbf’ drop;
刪除臨時表空間(徹底刪除):
SQL> drop tablespace temp1 including contents and datafiles cascade constraints;




10、臨時表空間組介紹
  1)創建臨時表空間組:
create temporary tablespace tempts1 tempfile '/home/oracle/temp1_02.dbf' size 2M tablespace group group1;
create temporary tablespace tempts2 tempfile '/home/oracle/temp2_02.dbf' size 2M tablespace group group2;
 
 2)查詢臨時表空間組:dba_tablespace_groups視圖
select * from dba_tablespace_groups;
GROUP_NAME                     TABLESPACE_NAME
------------------------------ ------------------------------
GROUP1                         TEMPTS1
GROUP2                         TEMPTS2

 3)將表空間從一個臨時表空間組移動到另外一個臨時表空間組:
alter tablespace tempts1 tablespace group GROUP2 ;
select * from dba_tablespace_groups;

GROUP_NAME                     TABLESPACE_NAME
------------------------------ ------------------------------
GROUP2                         TEMPTS1
GROUP2                         TEMPTS2

 4)把臨時表空間組指定給用戶
alter user scott temporary tablespace GROUP2;

 5)在數據庫級設置臨時表空間
alter database <db_name> default temporary tablespace GROUP2;

 6)刪除臨時表空間組 (刪除組成臨時表空間組的所有臨時表空間)
drop tablespace tempts1 including contents and datafiles;
select * from dba_tablespace_groups;
GROUP_NAME                     TABLESPACE_NAME
------------------------------ ------------------------------
GROUP2                         TEMPTS2

drop tablespace tempts2 including contents and datafiles;
select * from dba_tablespace_groups;
GROUP_NAME                     TABLESPACE_NAME

11、對臨時表空間進行shrink(11g新增的功能)
--將temp表空間收縮爲20M
alter tablespace temp shrink space keep 20M;
--自動將表空間的臨時文件縮小到最小可能的大小
ALTER TABLESPACE temp SHRINK TEMPFILE ’/u02/oracle/data/lmtemp02.dbf’;

臨時表空間作用
Oracle臨時表空間主要用來做查詢和存放一些緩衝區數據。臨時表空間消耗的主要原因是需要對查詢的中間結果進行排序。
重啓數據庫可以釋放臨時表空間,如果不能重啓實例,而一直保持問題sql語句的執行,temp表空間會一直增長。直到耗盡硬盤空間。
網上有人猜測在磁盤空間的分配上,oracle使用的是貪心算法,如果上次磁盤空間消耗達到1GB,那麼臨時表空間就是1GB。
也就是說當前臨時表空間文件的大小是歷史上使用臨時表空間最大的大小。

臨時表空間的主要作用:
  索引create或rebuild;
  Order by 或 group by;
  Distinct 操作;
  Union 或 intersect 或 minus;
  Sort-merge joins;
  analyze.

undo表空間回滾段概念

可以這樣認爲。特別是unxpstealcnt。但具體還要看情況而定。
回滾空間重用機制如下:
1、首先檢查本回滾段當前區是否有空間塊,如果有直接使用。
2、如果沒有,事務伸展到下一個區,這被稱爲一次Wrap,v$rollstat中的WRAPS列加1。如果本回滾段有多個事務,第一個伸展到下一個區的事務會引起WRAPS列加1,其他事務再伸展至一下區,此列不再增加。
3、如果本回滾段中沒有可用的區,從UNDO表空間中請求區。這被稱爲一次Extend,記入v$rollstat的EXTENTS列。
4、UNDO表空間中沒有Free區,從其他回滾段Steal過期的區。Steal的單位一定是以區爲單位。無論Steal是否成功,V$UNDOSTAT的EXPSTEALCNT列都會加1,此列統計的是次數。EXPBLKRELCNT列是成功Steal的塊數。
5、如果Steal過期區不成功,試圖擴展數據文件。
6、如果無法擴展文件,在本回滾段中重用未過期的區,V$UNDOSTAT.UNXPBLKREUCNT列增加(增加值是區中塊的個數)
7、如本回滾段無過期的塊,則Steal其他回滾段中未過期的區。每Steal一次,無論是否成功,都會記入V$UNDOSTAT.UNXPSTEALCNT列。Steal的塊數記入UNXPBLKREUCNT列。
8、如還不行,報ORA-30036錯誤。

如果都開始偷竊其他回滾段中未過期的空間了,說明可用空間已經被用完了。





     1.查詢回滾段的信息。所用數據字典:DBA_ROLLBACK_SEGS,可以查詢的信息:回滾段的標識(SEGMENT_ID)、名稱(SEGMENT_NAME)、所在表空間(TABLESPACE_NAME)、類型(OWNER)、狀態(STATUS)。
select * from DBA_ROLLBACK_SEGS
查看回滾段的統計信息:
SELECT n.name, s.extents, s.rssize, s.optsize, s.hwmsize, s.xacts, s.status
FROM v$rollname n, v$rollstat s
WHERE n.usn = s.usn;
3.查看回滾段的使用情況,哪個用戶正在使用回滾段的資源:
select s.username, u.name
from v$transaction t, v$rollstat r, v$rollname u, v$session s
where s.taddr = t.addr
and t.xidusn = r.usn
and r.usn = u.usn
order by s.username;


 SELECT S.SID,  
         S.USERNAME,  
         U.NAME,  
         Q.SQL_TEXT,  
         Q.HASH_VALUE,  
         T.UBABLK  
    FROM V$TRANSACTION T,  
         V$ROLLSTAT R,  
         V$ROLLNAME U,  
         V$SESSION S,  
         V$SQL Q  
   WHERE     S.TADDR = T.ADDR  
         AND T.XIDUSN = R.USN  
         AND R.USN = U.USN  
         AND Q.HASH_VALUE =  
                DECODE(S.SQL_HASH_VALUE,  
                        NULL, S.PREV_HASH_VALUE,  
                        S.SQL_HASH_VALUE)  
ORDER BY S.USERNAME



UNDO表空間的使用情況會因事務量變化而變化,一般我們在計算時同時參考UNDO表空間的平均使用情況和峯值使用情況。
以下SQL語句用於計算過去7*24小時中UNDO表空間的平均使用量:
select ur undo_retention,
dbs db_block_size,
((ur * (ups * dbs)) + (dbs * 24)) / 1024 / 1024 as "M_bytes"
from (select value as ur from v$parameter where name = 'undo_retention'),
(select (sum(undoblks) / sum(((end_time - begin_time) * 86400))) ups
from v$undostat),
(select value as dbs from v$parameter where name = 'db_block_size')
/
以下SQL語句則按峯值情況計算UNDO表空間所需空間:
select ur undo_retention,
dbs db_block_size,
((ur * (ups * dbs)) + (dbs * 24)) / 1024 / 1024 as "M_bytes"
from (select value as ur from v$parameter where name = 'undo_retention'),
(select (undoblks / ((end_time - begin_time) * 86400)) ups
from v$undostat
where undoblks in (select max(undoblks) from v$undostat)),
(select value as dbs from v$parameter where name = 'db_block_size')
group by ur,dbs,((ur * (ups * dbs)) + (dbs * 24)) / 1024 / 1024
/
該查詢將返回以STATUS分組的各狀態回滾信息所使用的空間量,一般存在三種STATUS狀態:EXPIRED,UNEXPIRED,ACTIVE。ACTIVE表示目前仍活躍的事務相關回滾信息,UNEXPIRED表示雖然事務已經結束但回滾信息保留的時間仍未超過實例參數UNDO_RETENTION所設定的值,EXPIRED表示回滾信息保留時間已超過UNDO_RETENTION所設定的值。
在UNDO表空間未啓用guarantee選項的情況下(當前使用情況),新事務的回滾空間分配遵循以下依據:
a)         尋找不存在ACTIVE區間的回滾段,若沒有則創建一個新的回滾段,若空間不允許生成新段,則返回錯誤。
b)        如果有一個回滾段被選中,但是其中空閒的空間並不足以存儲該事務的回滾信息,那麼它將嘗試創建區間,如果表空間上沒有空間,那麼將會進入下一步。
c)         如果創建新區間失敗,它將會搜索其他回滾段中的EXPIRED區間並重用。
d)        如果其他回滾段中沒有EXPIRED區間可使用,那麼它會繼續搜索其他回滾段中UNEXPIRED區間並重用,注意事務不會重用本回滾段中的UNEXPIRED區間,故UNEXPIRED的回滾空間僅部分可以爲Oracle重用;若仍得不到所需則返回錯誤。
當我們觀察到ACTIVE回滾信息所佔用空間很大時,說明系統目前運行的事務繁忙。因目前未啓用UNDO表空間的guarantee選項,故EXPIRED的全部回滾空間與UNEXPIRED的部分回滾空間可以爲Oracle複用,在實時監控時主要觀察ACTIVE狀態回滾信息使用的空間即可。
在系統相關業務不變的情況下,我們通過計算UNDO表空間的峯值使用情況即可最大程度完善UNDO表空間的配置;而當系統處於業務調整階段,如新的業務加入或業務時段調整情況下,則需要進一步實時監控UNDO表空間使用情況,以滿足動態調整需求。



select b.tablespace_name, AUTOEXTENSIBLE, RETENTION
  from dba_tablespaces a, dba_data_files b
 where a.TABLESPACE_NAME = b.TABLESPACE_NAME
   and b.TABLESPACE_NAME = 'UNDOTBS1';


 select tablespace_name,file_name,bytes/1024/1024,autoextensible from dba_data_files;
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章