1.关键数据类型和结构
sqlite 里最常用到的是 sqlite3 * 类型。从数据库打开开始,sqlite就要为这个类型准备好内存,直到数据库关闭,整个过程都需要用到这个类型。当数据库打开时开始,这个类型的变量就代表了你要操作的数据库。下面再详细介绍。
大 多数的数据库在数据类型上都有严格的限制,在建立表的时候,每一列都必须制定一个数据类型,只有符合该数据类型的数据可以被保存在这一列当中。而在 sqlite 2.X中,数据类型这个属性只属于数据本生,而不和数据被存在哪一列有关,也就是说数据的类型并不受数据列限制(有一个例外:INTEGER PRIMARY KEY,该列只能存整型数据)。
但是当sqlite进入到3.0版本的时候,这个问题似乎又有了新的答案,sqlite的开发者 开始限制这种无类型的使用,在3.0版本当中,每一列开始拥有自己的类型,并且在数据存入该列的时候,数据库会试图把数据的类型向该类型转换,然后以转换 之后的类型存储。当然,如果转换被认为是不可行的,sqlite仍然会存储这个数据,就像他的前任版本一样。
举个例子,如果你企图向一个INTEGER类型的列中插入一个字符串,sqlite会检查这个字符串是否有整型数据的特征,如果有而且可以被数据库所识别,那么该字符串会被转换成整型再保存,如果不行,则还是作为整型存储。
总的来说,所有存在sqlite 3.0版本当中的数据都拥有以下之一的数据类型:
空(NULL):该值为空
整型(INTEGEER):有符号整数,按大小被存储成1,2,3,4,6或8字节。
实数(REAL):浮点数,以8字节指数形式存储。
文本(TEXT):字符串,以数据库编码方式存储(UTF-8,UTF-16BE 或者 UTF-16-LE)。
BLOB:BLOB数据不做任何转换,以输入形式存储。
注意:在关系数据库中,CLOB和BLOB类型被用来存放大对象。BOLB表示二进制大对象,这种数据类型通过用来保存图片,图象,视频等。CLOB表示字符大对象,能够存放大量基于字符的数据。
对应的,对于数据列,同样有以下的数据类型:
TEXT
NUMERIC
INTEGER
REAL
NONE
数据列的属性的作用是确定对插入的数据的转换方向:
TEXT 将数据向文本进行转换,对应的数据类型为NULL,TEXT 或 BLOB
NUMERIC 将数据向数字进行转换,对应的数据类型可能为所有的五类数据,当试图存入文本 时将执行向整型或浮点类型的转换(视具体的数值而定),转换若不可行,则保留文本类型存储,NULL或BLOB不做变化
INTEGER 将数据向整型转换,类似于NUMERIC,不同的是没有浮点标志的浮点数将转换为整型保存
REAL 将数据向浮点数类型转换,类似于NUMERIC,不同的是整数将转换为浮点数保存
NULL 不做任何转换的数据列类型
2.打开数据库
int sqlite3_open(filename,sqlite3 * );
两个参数:
文件名不需要一定存在,如果此文件不存在,sqlite 会自动建立它。如果它存在,就尝试把它当数据库文件来打开。
二是sqlite3 ** 参数,即前面提到的关键数据结构。这个结构底层细节如何,你不要关它。
函数返回值表示操作是否正确,如果是 sqlITE_OK 则表示操作正常。相关的返回值sqlite定义了一些宏。具体这些宏的含义可以参考 sqlite3.h 文件。里面有详细定义(顺便说一下,sqlite3 的代码注释率自称是非常高的,实际上也的确很高。只要你会看英文,sqlite 可以让你学到不少东西)。
int sqlite3_close(sqlite3 *);
4.执行sql语句
int sqlite3_exec(sqlite3*,const char *sql,sqlite3_callback,void *,char **errmsg );
第1个参数不再说了,是前面open函数得到的指针。说了是关键数据结构。
第2个参数const char *sql 是一条 sql 语句,以/0结尾。
第3个参数sqlite3_callback 是回调,当这条语句执行之后,sqlite3会去调用你提供的这个函数。(什么是回调函数,自己找别的资料学习)
第4个参数void * 是你所提供的指针,你可以传递任何一个指针参数到这里,这个参数最终会传到回调函数里面,如果不需要传递指针给回调函数,可以填NULL。等下我们再看回调函数的写法,以及这个参数的使用。
第5个参数char ** errmsg 是错误信息。注意是指针的指针。sqlite3里面有很多固定的错误信息。执行 sqlite3_exec 之后,执行失败时可以查阅这个指针(直接 printf(“%s/n”,errmsg))得到一串字符串信息,这串信息告诉你错在什么地方。sqlite3_exec函数通过修改你传入的指针的指针,把你提供的指针指向错误提示信息,这样sqlite3_exec函数外面就可以通过这个 char*得到具体错误提示。
说明:通常,sqlite3_callback 和它后面的 void * 这两个位置都可以填 NULL。填NULL表示你不需要回调。比如你做 insert 操作,做 delete 操作,就没有必要使用回调。而当你做 select 时,就要使用回调,因为 sqlite3 把数据查出来,得通过回调告诉你查出了什么数据。
5.exec 的回调
typedef int (*sqlite3_callback)(void*,int,char**,char**);你的回调函数必须定义成上面这个函数的类型。
6.查询
int sqlite3_get_table(sqlite3*,char***result,int *nrow,int *ncolumn,char **errmsg );第1个参数不再多说,看前面的例子。
第2个参数是 sql 语句,跟 sqlite3_exec 里的 sql 是一样的。是一个很普通的以/0结尾的char *字符串。
第3个参数是查询结果,它依然一维数组(不要以为是二维数组,更不要以为是三维数组)。它内存布局是:第一行是字段名称,后面是紧接着是每个字段的值。下面用例子来说事。
第4个参数是查询出多少条记录(即查出多少行)。
第5个参数是多少个字段(多少列)。
第6个参数是错误信息。
7.删除
sql = "delete from SensorData where SensorID = 1 ;" ; sqlite3_exec( db,sql,&zErrMsg );所有的操作都可以通过sqlite3_exec这个函数
sqlite基本操作举例:
#include<stdio.h> #include<stdlib.h> #include<sqlite3.h> //回调函数 int LoadMyInfo(void *para,int n_column,char **column_value,char **column_name) { int i; printf("记录包含%d个字段\n",n_column); for(i = 0;i < n_column;i++) { printf("字段名:%s字段值:%s\n",column_name[i],column_value[i]); } printf("-------------------------\n"); return 0; } int main(void) { sqlite3 *db = NULL; char *zErrMsg = 0; int rc; rc = sqlite3_open("wxj.db",&db); if(rc) { fprintf(stderr,"open error:%s\n",sqlite3_errmsg(db)); sqlite3_close(db); exit(1); } else printf("open successfully\n"); char *sql = "create table SensorData(ID INTEGER PRIMARY KEY,SensorID INTEGER,SiteNum INTEGER,Time VARCAR(12),SersorParameter REAL );"; sqlite3_exec(db,&zErrMsg); #ifdef _DEBUG_ printf("%s\n",zErrMsg); #endif char *sql1 = "insert into SensorData values(NULL,1,'1',98.9);"; sqlite3_exec(db,sql1,&zErrMsg); char *sql2 = "insert into SensorData values(NULL,'2',99.9);"; sqlite3_exec(db,sql2,&zErrMsg); char *sql4 = "insert into SensorData values(NULL,'3',100);"; sqlite3_exec(db,sql4,&zErrMsg); printf("基于回调函数查询结果\n"); char *sql3 = "select *from SensorData"; sqlite3_exec(db,sql3,LoadMyInfo,NULL,&zErrMsg);//基于回调函数的查询 printf("删除数据后的查询\n"); char *sql5 = "delete from SensorData where SensorID = 1;"; sqlite3_exec(db,sql5,&zErrMsg); printf("基于非回调函数查询结果\n"); char **result; int nrow = 0,ncolumn = 0,index; sqlite3_get_table(db,&result,&nrow,&ncolumn,&zErrMsg); int i = 0,j = 0; printf("row=%dcolumn=%d\n",nrow,ncolumn); index = ncolumn; printf("查到%d条记录\n",nrow); for(i = 0;i < nrow;i++) { printf("第%d条记录\n",i+1); for(j = 0;j < ncolumn;j++) { printf("字段名:%s字段值:%s\n",result[j],result[index]); ++index; } printf("---------------\n"); } sqlite3_close(db); return 0; }
8.写入二进制
要插入二进制,前提是这个表的字段的类型是 blob 类型。我假设有这么一张表:
create table Tbl_2( ID integer,file_content blob )
首先声明
sqlite3_stmt * stat;
然后,把一个 sql 语句解析到 stat 结构里去:
sqlite3_prepare( db,“insert into Tbl_2( ID,file_content) values( 10,? )”,-1,&stat,0 );
第一个参数跟前面一样,是个 sqlite3 * 类型变量,第二个参数是一个 sql 语句。
这个 sql 语句特别之处在于 values 里面有个 ? 号。在sqlite3_prepare函数里,?号表示一个未定的值,它的值等下才插入。
第三个参数我写的是-1,这个参数含义是前面 sql 语句的长度。如果小于0,sqlite会自动计算它的长度(把sql语句当成以/0结尾的字符串)。
第四个参数是 sqlite3_stmt 的指针的指针。解析以后的sql语句就放在这个结构里。
第五个参数为0就可以了。
如果这个函数执行成功(返回值是 sqlITE_OK 且 stat 不为NULL ),那么下面就可以开始插入二进制数据。
sqlite3_bind_blob( stat,pdata,(int)(length_of_data_in_bytes),NULL ); // pdata为数据缓冲区,length_of_data_in_bytes为数据大小,以字节为单位
这个函数一共有5个参数。
第1个参数:是前面prepare得到的 sqlite3_stmt * 类型变量。
第2个参数:?号的索引。前面prepare的sql语句里有一个?号,假如有多个?号怎么插入?方法就是改变 bind_blob 函数第2个参数。这个参数我写1,表示这里插入的值要替换 stat 的第一个?号(这里的索引从1开始计数,而非从0开始)。如果你有多个?号,就写多个 bind_blob 语句,并改变它们的第2个参数就替换到不同的?号。如果有?号没有替换,sqlite为它取值null。
第3个参数:二进制数据起始指针。
第4个参数:二进制数据的长度,以字节为单位。
第5个参数:是个析够回调函数,告诉sqlite当把数据处理完后调用此函数来析够你的数据。这个参数我还没有使用过,因此理解也不深刻。但是一般都填NULL,需要释放的内存自己用代码来释放。
bind完了之后,二进制数据就进入了你的“sql语句”里了。你现在可以把它保存到数据库里:
int result = sqlite3_step( stat );
通过这个语句,stat 表示的sql语句就被写到了数据库里。
最后,要把 sqlite3_stmt 结构给释放:
sqlite3_finalize( stat ); //把刚才分配的内容析构掉
9.读出二进制
下面说读二进制的步骤。
跟前面一样,先声明 sqlite3_stmt * 类型变量:
sqlite3_stmt * stat;
然后,把一个 sql 语句解析到 stat 结构里去:
sqlite3_prepare( db,“select * from Tbl_2”,0 );
当 prepare 成功之后(返回值是 sqlITE_OK ),开始查询数据。
int result = sqlite3_step( stat );
这一句的返回值是 sqlITE_ROW 时表示成功(不是 sqlITE_OK )。
你可以循环执行 sqlite3_step 函数,一次 step 查询出一条记录。直到返回值不为 sqlITE_ROW 时表示查询结束。
然后开始获取第一个字段:ID 的值。ID是个整数,用下面这个语句获取它的值:
int id = sqlite3_column_int( stat,0 ); //第2个参数表示获取第几个字段内容,从0开始计算,因为我的表的ID字段是第一个字段,因此这里我填0
下面开始获取 file_content 的值,因为 file_content 是二进制,因此我需要得到它的指针,还有它的长度:
const void * pFileContent = sqlite3_column_blob( stat,1 );
int len = sqlite3_column_bytes( stat,1 );
这样就得到了二进制的值。
把 pFileContent 的内容保存出来之后,不要忘了释放 sqlite3_stmt 结构:
sqlite3_finalize( stat ); //把刚才分配的内容析构掉
i.3 重复使用 sqlite3_stmt 结构
如果你需要重复使用 sqlite3_prepare 解析好的 sqlite3_stmt 结构,需要用函数: sqlite3_reset。
result = sqlite3_reset(stat);
这样, stat 结构又成为 sqlite3_prepare 完成时的状态,你可以重新为它 bind 内容。
sqlite中如何操作blob类型的字段:
#include<sqlite3.h> #include<stdio.h> #include<stdlib.h> int main(int argc,char *argv[]) { sqlite3 *db = NULL; sqlite3_stmt *stmt = NULL; char *ffile;//指向下面新分配的空间地址 FILE *fp; int rc,i,j; char *zErrMsg; long filesize = 0; rc = sqlite3_open("image.db",&db); if(rc) { fprintf(stderr,sqlite3_errmsg(db)); sqlite3_close(db); exit(1); } else printf("open successfully\n"); sqlite3_exec(db,"create table imagelist(filename varchar(128) unique,image blob);",&zErrMsg); rc = sqlite3_prepare(db,"insert into imagelist values('x,jpg',?);",&stmt,0); if(rc != sqlITE_OK) { printf("sqlite3_prepare error\n"); return 0; } fp = fopen("x.jpg","rb"); if(fp != NULL) { //计算文件的大小 fseek(fp,SEEK_END); filesize = ftell(fp); fseek(fp,SEEK_SET); //读取文件 ffile = (char*)malloc(filesize+1); size_t sz = fread(ffile,sizeof(char),filesize+1,fp); fclose(fp); } //将文件数据绑定到insert语句中,替换?部分 sqlite3_bind_blob(stmt,ffile,filesize,NULL); //执行绑定之后的sql语句 sqlite3_step(stmt); //查询并读取二进制 rc = sqlite3_prepare(db,"select *from imagelist;",0); if(rc != sqlITE_OK) { printf("sqlite3_prepare error\n"); return 0; } sqlite3_step(stmt); //获取file_content的值,为二进制 //获取指针 const void *test = sqlite3_column_blob(stmt,1); //获取长度 int size = sqlite3_column_bytes(stmt,1); //把格式化的数据写入到字符串中 //char buffer[1024] = "0"; //sprintf(buffer,"%s",test); FILE *fp2; fp2 = fopen("y.jpg","wb"); if(fp2 != NULL) { size_t ret = fwrite(test,size,fp2); fclose(fp2); } free(ffile); //析构 sqlite3_finalize(stmt); sqlite3_close(db); return 0; }
10.事务处理
sqlite 是支持事务处理的。如果你知道你要同步删除很多数据,不仿把它们做成一个统一的事务。
通常一次 sqlite3_exec 就是一次事务,如果你要删除1万条数据,sqlite就做了1万次:开始新事务->删除一条数据->提交事务->开始新事务->… 的过程。这个操作是很慢的。因为时间都花在了开始事务、提交事务上。
你可以把这些同类操作做成一个事务,这样如果操作错误,还能够回滚事务。
事务的操作没有特别的接口函数,它就是一个普通的 sql 语句而已:
分别如下:
int result; result = sqlite3_exec( db,"begin transaction",&zErrorMsg ); //开始一个事务 result = sqlite3_exec( db,"commit transaction",&zErrorMsg ); //提交事务 result = sqlite3_exec( db,"rollback transaction",&zErrorMsg ); //回滚事务