TEXT類型讀取超過2M的字符串的時候報錯
Couldn't read row 0, col 0 from CursorWindow. Make sure the Cursor is initialized correctly before accessing data from it.
- 關於SQLite 不同類型存儲數據大小的限制
1、CHAR。CHAR存儲定長數據很方便,CHAR字段上的索引效率級高,比如定義char(10),那麼不論你存儲的數據是否達到了10個字節,都要佔去10個字節的空間,不足的自動用空格填充。
2、VARCHAR。存儲變長數據,但存儲效率沒有CHAR高。如果一個字段可能的值是不固定長度的,我們只知道它不可能超過10個字符,把它定義爲 VARCHAR(10)是最合算的。VARCHAR類型的實際長度是它的值的實際長度+1。爲什麼“+1”呢?這一個字節用於保存實際使用了多大的長度。從空間上考慮,用varchar合適;從效率上考慮,用char合適,關鍵是根據實際情況找到權衡點。
3、TEXT。text存儲可變長度的非Unicode數據,最大長度爲2^31-1(2,147,483,647)個字符。
4、NCHAR、NVARCHAR、NTEXT。這三種從名字上看比前面三種多了個“N”。它表示存儲的是Unicode數據類型的字符。我們知道字符中,英文字符只需要一個字節存儲就足夠了,但漢字衆多,需要兩個字節存儲,英文與漢字同時存在時容易造成混亂,Unicode字符集就是爲了解決字符集這種不兼容的問題而產生的,它所有的字符都用兩個字節表示,即英文字符也是用兩個字節表示。nchar、nvarchar的長度是在1到4000之間。和char、varchar比較起來,nchar、nvarchar則最多存儲4000個字符,不論是英文還是漢字;而char、varchar最多能存儲8000個英文,4000個漢字。可以看出使用nchar、nvarchar數據類型時不用擔心輸入的字符是英文還是漢字,較爲方便,但在存儲英文時數量上有些損失。
問題
理論上,TEXT可以存儲的字符串長度爲2^31-1(2,147,483,647)個字符,按英文字符來算的話就是 2G大小
但是,Cursor 在獲取超過2M 大小數據的時候,會報異常。
所以處理方式用字符串截取的方式來處理
select LENGTH(SHAPE)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
select substr(SHAPE,0,1048576)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
select substr(SHAPE,1048576,2097152)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
使用到的函數的說明:
substr(X,Y,Z) 返回輸入字符串X中以第Y個字符開始,Z個字符長的子串。X最左端的字符序號爲1。若Y爲負,則從右至左數起
代碼中使用的方法
public static String getShape(SupportSQLiteDatabase db, int srID) {
Cursor c = null;
//因爲安卓性能特性,只能CursorWindow只能是1M的文件
try {
//先判斷文件大小
c = db.query("SELECT length(SHAPE) as len FROM SURVEY_RECORD WHERE _ID = " + srID);
int len = 0;
if (c.moveToFirst()) {
len = c.getInt(0);
if (c != null) {
c.close();
}
if (len < 100 * 10000) {
c = db.query("SELECT SHAPE FROM SURVEY_RECORD WHERE _ID = " + srID);
if (c.moveToNext()) {
return c.getString(c.getColumnIndex("SHAPE"));
}
if (c != null) {
c.close();
}
} else {
ByteBuffer buffer = ByteBuffer.allocate(len);
int count = 0, stemp = 600 * 1024;
while (count < len) {
if (count + stemp > len) {
stemp = len - count;
}
c = db.query("SELECT substr(SHAPE," + (count + 1) + "," + stemp + ") as SHAPE FROM SURVEY_RECORD WHERE _ID = " + srID);
if (c.moveToNext()) {
byte[] temp = c.getBlob(c.getColumnIndex("SHAPE"));
byte[] bytes = new byte[stemp];
System.arraycopy(temp, 0, bytes, 0, bytes.length);
buffer.put(bytes);
}
if (c != null) {
c.close();
}
count += stemp;
}
return new String(buffer.array());
}
}
} finally {
if (c != null) {
c.close();
}
}
return "";
}