SQLite學習八、TEXT類型讀取超過2M的字符串

TEXT類型讀取超過2M的字符串的時候報錯

Couldn't read row 0, col 0 from CursorWindow.  Make sure the Cursor is initialized correctly before accessing data from it.
  • 關於SQLite 不同類型存儲數據大小的限制

1、CHAR。CHAR存儲定長數據很方便,CHAR字段上的索引效率級高,比如定義char(10),那麼不論你存儲的數據是否達到了10個字節,都要佔去10個字節的空間,不足的自動用空格填充。

2、VARCHAR。存儲變長數據,但存儲效率沒有CHAR高。如果一個字段可能的值是不固定長度的,我們只知道它不可能超過10個字符,把它定義爲 VARCHAR(10)是最合算的。VARCHAR類型的實際長度是它的值的實際長度+1。爲什麼“+1”呢?這一個字節用於保存實際使用了多大的長度。從空間上考慮,用varchar合適;從效率上考慮,用char合適,關鍵是根據實際情況找到權衡點。

3、TEXT。text存儲可變長度的非Unicode數據,最大長度爲2^31-1(2,147,483,647)個字符。

4、NCHAR、NVARCHAR、NTEXT。這三種從名字上看比前面三種多了個“N”。它表示存儲的是Unicode數據類型的字符。我們知道字符中,英文字符只需要一個字節存儲就足夠了,但漢字衆多,需要兩個字節存儲,英文與漢字同時存在時容易造成混亂,Unicode字符集就是爲了解決字符集這種不兼容的問題而產生的,它所有的字符都用兩個字節表示,即英文字符也是用兩個字節表示。nchar、nvarchar的長度是在1到4000之間。和char、varchar比較起來,nchar、nvarchar則最多存儲4000個字符,不論是英文還是漢字;而char、varchar最多能存儲8000個英文,4000個漢字。可以看出使用nchar、nvarchar數據類型時不用擔心輸入的字符是英文還是漢字,較爲方便,但在存儲英文時數量上有些損失。


問題

理論上,TEXT可以存儲的字符串長度爲2^31-1(2,147,483,647)個字符,按英文字符來算的話就是 2G大小
但是,Cursor 在獲取超過2M 大小數據的時候,會報異常。

所以處理方式用字符串截取的方式來處理

select LENGTH(SHAPE)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and  TBBH = '6950' ;

select substr(SHAPE,0,1048576)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and  TBBH = '6950' ;

select substr(SHAPE,1048576,2097152)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and  TBBH = '6950' ;

使用到的函數的說明:

substr(X,Y,Z) 返回輸入字符串X中以第Y個字符開始,Z個字符長的子串。X最左端的字符序號爲1。若Y爲負,則從右至左數起

代碼中使用的方法

public static String getShape(SupportSQLiteDatabase db, int srID) {
        Cursor c = null;
        //因爲安卓性能特性,只能CursorWindow只能是1M的文件
        try {
            //先判斷文件大小
            c = db.query("SELECT length(SHAPE) as len FROM SURVEY_RECORD WHERE _ID = " + srID);
            int len = 0;
            if (c.moveToFirst()) {
                len = c.getInt(0);
                if (c != null) {
                    c.close();
                }
                if (len < 100 * 10000) {
                    c = db.query("SELECT SHAPE FROM SURVEY_RECORD WHERE _ID = " + srID);
                    if (c.moveToNext()) {
                        return c.getString(c.getColumnIndex("SHAPE"));
                    }
                    if (c != null) {
                        c.close();
                    }
                } else {
                    ByteBuffer buffer = ByteBuffer.allocate(len);
                    int count = 0, stemp = 600 * 1024;
                    while (count < len) {
                        if (count + stemp > len) {
                            stemp = len - count;
                        }

                        c = db.query("SELECT substr(SHAPE," + (count + 1) + "," + stemp + ") as SHAPE FROM  SURVEY_RECORD WHERE _ID = " + srID);
                        if (c.moveToNext()) {
                            byte[] temp = c.getBlob(c.getColumnIndex("SHAPE"));
                            byte[] bytes = new byte[stemp];
                            System.arraycopy(temp, 0, bytes, 0, bytes.length);
                            buffer.put(bytes);
                        }
                        if (c != null) {
                            c.close();
                        }
                        count += stemp;
                    }
                    return new String(buffer.array());
                }
            }
        } finally {
            if (c != null) {
                c.close();
            }
        }
        return "";
    }
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章