TEXT类型读取超过2M的字符串的时候报错
Couldn't read row 0, col 0 from CursorWindow. Make sure the Cursor is initialized correctly before accessing data from it.
- 关于SQLite 不同类型存储数据大小的限制
1、CHAR。CHAR存储定长数据很方便,CHAR字段上的索引效率级高,比如定义char(10),那么不论你存储的数据是否达到了10个字节,都要占去10个字节的空间,不足的自动用空格填充。
2、VARCHAR。存储变长数据,但存储效率没有CHAR高。如果一个字段可能的值是不固定长度的,我们只知道它不可能超过10个字符,把它定义为 VARCHAR(10)是最合算的。VARCHAR类型的实际长度是它的值的实际长度+1。为什么“+1”呢?这一个字节用于保存实际使用了多大的长度。从空间上考虑,用varchar合适;从效率上考虑,用char合适,关键是根据实际情况找到权衡点。
3、TEXT。text存储可变长度的非Unicode数据,最大长度为2^31-1(2,147,483,647)个字符。
4、NCHAR、NVARCHAR、NTEXT。这三种从名字上看比前面三种多了个“N”。它表示存储的是Unicode数据类型的字符。我们知道字符中,英文字符只需要一个字节存储就足够了,但汉字众多,需要两个字节存储,英文与汉字同时存在时容易造成混乱,Unicode字符集就是为了解决字符集这种不兼容的问题而产生的,它所有的字符都用两个字节表示,即英文字符也是用两个字节表示。nchar、nvarchar的长度是在1到4000之间。和char、varchar比较起来,nchar、nvarchar则最多存储4000个字符,不论是英文还是汉字;而char、varchar最多能存储8000个英文,4000个汉字。可以看出使用nchar、nvarchar数据类型时不用担心输入的字符是英文还是汉字,较为方便,但在存储英文时数量上有些损失。
问题
理论上,TEXT可以存储的字符串长度为2^31-1(2,147,483,647)个字符,按英文字符来算的话就是 2G大小
但是,Cursor 在获取超过2M 大小数据的时候,会报异常。
所以处理方式用字符串截取的方式来处理
select LENGTH(SHAPE)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
select substr(SHAPE,0,1048576)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
select substr(SHAPE,1048576,2097152)
from SURVEY_RECORD
where TBLX = 'SDDLTB' and TBBH = '6950' ;
使用到的函数的说明:
substr(X,Y,Z) 返回输入字符串X中以第Y个字符开始,Z个字符长的子串。X最左端的字符序号为1。若Y为负,则从右至左数起
代码中使用的方法
public static String getShape(SupportSQLiteDatabase db, int srID) {
Cursor c = null;
//因为安卓性能特性,只能CursorWindow只能是1M的文件
try {
//先判断文件大小
c = db.query("SELECT length(SHAPE) as len FROM SURVEY_RECORD WHERE _ID = " + srID);
int len = 0;
if (c.moveToFirst()) {
len = c.getInt(0);
if (c != null) {
c.close();
}
if (len < 100 * 10000) {
c = db.query("SELECT SHAPE FROM SURVEY_RECORD WHERE _ID = " + srID);
if (c.moveToNext()) {
return c.getString(c.getColumnIndex("SHAPE"));
}
if (c != null) {
c.close();
}
} else {
ByteBuffer buffer = ByteBuffer.allocate(len);
int count = 0, stemp = 600 * 1024;
while (count < len) {
if (count + stemp > len) {
stemp = len - count;
}
c = db.query("SELECT substr(SHAPE," + (count + 1) + "," + stemp + ") as SHAPE FROM SURVEY_RECORD WHERE _ID = " + srID);
if (c.moveToNext()) {
byte[] temp = c.getBlob(c.getColumnIndex("SHAPE"));
byte[] bytes = new byte[stemp];
System.arraycopy(temp, 0, bytes, 0, bytes.length);
buffer.put(bytes);
}
if (c != null) {
c.close();
}
count += stemp;
}
return new String(buffer.array());
}
}
} finally {
if (c != null) {
c.close();
}
}
return "";
}