三、高效的批量数据插入:
在给出操作步骤之前先简单说明一下批量插入的概念,以帮助大家阅读其后的示例代码。事实上,批量插入并不是什么新的概念,在其它关系型数据库的C接口API中都提供了一定的支持,只是接口的实现方式不同而已。纵观众多流行的数据库接口,如OCI(Oracle API)、MySQL API和PostgreSQL API等,OCI提供的编程接口最为方便,实现方式也最为高效。SQLite作为一种简单灵活的嵌入式数据库也同样提供了该功能,但是实现方式并不像其他数据库那样方便明显,它只是通过一种隐含的技巧来达到批量插入的目的,其逻辑如下:
1). 开始一个事物,以保证后面的数据操作语句均在该事物内完成。在SQLite中,如果没有手工开启一个事物,其所有的DML语句都是在自动提交模式下工作的,既每次操作后数据均被自动提交并写入磁盘文件。然而在非自动提交模式下,只有当其所在的事物被手工COMMIT之后才会将修改的数据写入到磁盘中,之前修改的数据都是仅仅驻留在内存中。显而易见,这样的批量写入方式在效率上势必会远远优于多迭代式的单次写入操作。
2). 基于变量绑定的方式准备待插入的数据,这样可以节省大量的sqlite3_prepare_v2函数调用次数,从而节省了多次将同一SQL语句编译成SQLite内部识别的字节码所用的时间。事实上,SQLite的官方文档中已经明确指出,在很多时候sqlite3_prepare_v2函数的执行时间要多于sqlite3_step函数的执行时间,因此建议使用者要尽量避免重复调用sqlite3_prepare_v2函数。在我们的实现中,如果想避免此类开销,只需将待插入的数据以变量的形式绑定到SQL语句中,这样该SQL语句仅需调用sqlite3_prepare_v2函数编译一次即可,其后的操作只是替换不同的变量数值。
3). 在完成所有的数据插入后显式的提交事物。提交后,SQLite会将当前连接自动恢复为自动提交模式。
下面是示例代码的实现步骤:
1). 创建测试数据表。
2). 通过执行BEGIN TRANSACTION语句手工开启一个事物。
3). 准备插入语句及相关的绑定变量。
4). 迭代式插入数据。
5). 完成后通过执行COMMIT语句提交事物。
6). 删除测试表。
见以下代码及关键性注释:
#include <sqlite3.h> #include <string> #include <stdio.h>using namespace std;
void doTest() { sqlite3* conn = NULL; //1. 打开数据库 int result = sqlite3_open("D:/mytest.db",&conn); if (result != SQLITE_OK) { sqlite3_close(conn); return; } const char* createTableSQL = "CREATE TABLE TESTTABLE (int_col INT, float_col REAL, string_col TEXT)"; sqlite3_stmt* stmt = NULL; int len = strlen(createTableSQL); //2. 准备创建数据表,如果创建失败,需要用sqlite3_finalize释放sqlite3_stmt对象,以防止内存泄露。 if (sqlite3_prepare_v2(conn,createTableSQL,len,&stmt,NULL) != SQLITE_OK) { if (stmt) sqlite3_finalize(stmt); sqlite3_close(conn); return; } //3. 通过sqlite3_step命令执行创建表的语句。对于DDL和DML语句而言,sqlite3_step执行正确的返回值 //只有SQLITE_DONE,对于SELECT查询而言,如果有数据返回SQLITE_ROW,当到达结果集末尾时则返回 //SQLITE_DONE。 if (sqlite3_step(stmt) != SQLITE_DONE) { sqlite3_finalize(stmt); sqlite3_close(conn); return; } //4. 释放创建表语句对象的资源。 sqlite3_finalize(stmt); printf("Succeed to create test table now.\n");
//5. 显式的开启一个事物。 sqlite3_stmt* stmt2 = NULL; const char* beginSQL = "BEGIN TRANSACTION"; if (sqlite3_prepare_v2(conn,beginSQL,strlen(beginSQL),&stmt2,NULL) != SQLITE_OK) { if (stmt2) sqlite3_finalize(stmt2); sqlite3_close(conn); return; } if (sqlite3_step(stmt2) != SQLITE_DONE) { sqlite3_finalize(stmt2); sqlite3_close(conn); return; } sqlite3_finalize(stmt2);
//6. 构建基于绑定变量的插入数据。 const char* insertSQL = "INSERT INTO TESTTABLE VALUES(?,?,?)"; sqlite3_stmt* stmt3 = NULL; if (sqlite3_prepare_v2(conn,insertSQL,strlen(insertSQL),&stmt3,NULL) != SQLITE_OK) { if (stmt3) sqlite3_finalize(stmt3); sqlite3_close(conn); return; } int insertCount = 10; const char* strData = "This is a test."; //7. 基于已有的SQL语句,迭代的绑定不同的变量数据 for (int i = 0; i < insertCount; ++i) { //在绑定时,最左面的变量索引值是1。 sqlite3_bind_int(stmt3,1,i); sqlite3_bind_double(stmt3,2,i * 1.0); sqlite3_bind_text(stmt3,3,strData,strlen(strData),SQLITE_TRANSIENT); if (sqlite3_step(stmt3) != SQLITE_DONE) { sqlite3_finalize(stmt3); sqlite3_close(conn); return; } //重新初始化该sqlite3_stmt对象绑定的变量。 sqlite3_reset(stmt3); printf("Insert Succeed.\n"); } sqlite3_finalize(stmt3);
//8. 提交之前的事物。 const char* commitSQL = "COMMIT"; sqlite3_stmt* stmt4 = NULL; if (sqlite3_prepare_v2(conn,commitSQL,strlen(commitSQL),&stmt4,NULL) != SQLITE_OK) { if (stmt4) sqlite3_finalize(stmt4); sqlite3_close(conn); return; } if (sqlite3_step(stmt4) != SQLITE_DONE) { sqlite3_finalize(stmt4); sqlite3_close(conn); return; } sqlite3_finalize(stmt4);
//9. 为了方便下一次测试运行,我们这里需要删除该函数创建的数据表,否则在下次运行时将无法 //创建该表,因为它已经存在。 const char* dropSQL = "DROP TABLE TESTTABLE"; sqlite3_stmt* stmt5 = NULL; if (sqlite3_prepare_v2(conn,dropSQL,strlen(dropSQL),&stmt5,NULL) != SQLITE_OK) { if (stmt5) sqlite3_finalize(stmt5); sqlite3_close(conn); return; } if (sqlite3_step(stmt5) == SQLITE_DONE) { printf("The test table has been dropped.\n"); } sqlite3_finalize(stmt5); sqlite3_close(conn); }
int main() { doTest(); return 0; } //输出结果如下: //Succeed to create test table now. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //Insert Succeed. //The test table has been dropped.
该结果和上一个例子(普通数据插入)的结果完全相同,只是在执行效率上明显优于前者。
四、数据查询:
数据查询是每个关系型数据库都会提供的最基本功能,下面的代码示例将给出如何通过SQLite API获取数据。
1). 创建测试数据表。
2). 插入一条测试数据到该数据表以便于后面的查询。
3). 执行SELECT语句检索数据。
4). 删除测试表。
见以下示例代码和关键性注释:
#include <sqlite3.h> #include <string> #include <stdio.h>using namespace std;
void doTest() { sqlite3* conn = NULL; //1. 打开数据库 int result = sqlite3_open("D:/mytest.db",&conn); if (result != SQLITE_OK) { sqlite3_close(conn); return; } const char* createTableSQL = "CREATE TABLE TESTTABLE (int_col INT, float_col REAL, string_col TEXT)"; sqlite3_stmt* stmt = NULL; int len = strlen(createTableSQL); //2. 准备创建数据表,如果创建失败,需要用sqlite3_finalize释放sqlite3_stmt对象,以防止内存泄露。 if (sqlite3_prepare_v2(conn,createTableSQL,len,&stmt,NULL) != SQLITE_OK) { if (stmt) sqlite3_finalize(stmt); sqlite3_close(conn); return; } //3. 通过sqlite3_step命令执行创建表的语句。对于DDL和DML语句而言,sqlite3_step执行正确的返回值 //只有SQLITE_DONE,对于SELECT查询而言,如果有数据返回SQLITE_ROW,当到达结果集末尾时则返回 //SQLITE_DONE。 if (sqlite3_step(stmt) != SQLITE_DONE) { sqlite3_finalize(stmt); sqlite3_close(conn); return; } //4. 释放创建表语句对象的资源。 sqlite3_finalize(stmt); printf("Succeed to create test table now.\n");
//5. 为后面的查询操作插入测试数据。 sqlite3_stmt* stmt2 = NULL; const char* insertSQL = "INSERT INTO TESTTABLE VALUES(20,21.0,'this is a test.')"; if (sqlite3_prepare_v2(conn,insertSQL,strlen(insertSQL),&stmt2,NULL) != SQLITE_OK) { if (stmt2) sqlite3_finalize(stmt2); sqlite3_close(conn); return; } if (sqlite3_step(stmt2) != SQLITE_DONE) { sqlite3_finalize(stmt2); sqlite3_close(conn); return; } printf("Succeed to insert test data.\n"); sqlite3_finalize(stmt2);
//6. 执行SELECT语句查询数据。 const char* selectSQL = "SELECT * FROM TESTTABLE"; sqlite3_stmt* stmt3 = NULL; if (sqlite3_prepare_v2(conn,selectSQL,strlen(selectSQL),&stmt3,NULL) != SQLITE_OK) { if (stmt3) sqlite3_finalize(stmt3); sqlite3_close(conn); return; } int fieldCount = sqlite3_column_count(stmt3); do { int r = sqlite3_step(stmt3); if (r == SQLITE_ROW) { for (int i = 0; i < fieldCount; ++i) { //这里需要先判断当前记录当前字段的类型,再根据返回的类型使用不同的API函数 //获取实际的数据值。 int vtype = sqlite3_column_type(stmt3,i); if (vtype == SQLITE_INTEGER) { int v = sqlite3_column_int(stmt3,i); printf("The INTEGER value is %d.\n",v); } else if (vtype == SQLITE_FLOAT) { double v = sqlite3_column_double(stmt3,i); printf("The DOUBLE value is %f.\n",v); } else if (vtype == SQLITE_TEXT) { const char* v = (const char*)sqlite3_column_text(stmt3,i); printf("The TEXT value is %s.\n",v); } else if (vtype == SQLITE_NULL) { printf("This value is NULL.\n"); } } } else if (r == SQLITE_DONE) { printf("Select Finished.\n"); break; } else { printf("Failed to SELECT.\n"); sqlite3_finalize(stmt3); sqlite3_close(conn); return; } } while (true); sqlite3_finalize(stmt3);
//7. 为了方便下一次测试运行,我们这里需要删除该函数创建的数据表,否则在下次运行时将无法 //创建该表,因为它已经存在。 const char* dropSQL = "DROP TABLE TESTTABLE"; sqlite3_stmt* stmt4 = NULL; if (sqlite3_prepare_v2(conn,dropSQL,strlen(dropSQL),&stmt4,NULL) != SQLITE_OK) { if (stmt4) sqlite3_finalize(stmt4); sqlite3_close(conn); return; } if (sqlite3_step(stmt4) == SQLITE_DONE) { printf("The test table has been dropped.\n"); } sqlite3_finalize(stmt4); sqlite3_close(conn); }
int main() { doTest(); return 0; } //输出结果如下: //Succeed to create test table now. //Succeed to insert test data. //The INTEGER value is 20. //The DOUBLE value is 21.000000. //The TEXT value is this is a test.. //Select Finished. //The test table has been dropped.
本文向大家介绍C语言泛型编程实例教程,包括了C语言泛型编程实例教程的使用技巧和注意事项,需要的朋友参考一下 本文实例讲述了C语言泛型编程的方法,分享给大家供大家参考之用。具体分析如下: 首先,泛型编程让你编写完全一般化并可重复使用的算法,其效率与针对某特定数据类型而设计的算法相同。在C语言中,可以通过一些手段实现这样的泛型编程。这里介绍一种方法——通过无类型指针void* 看下面的一个实现交换两个
C语言是一门面向过程的、抽象化的通用程序设计语言,广泛应用于底层开发。C语言能以简易的方式编译、处理低级存储器。C语言是仅产生少量的机器语言以及不需要任何运行环境支持便能运行的高效率程序设计语言。
本文向大家介绍python和C语言混合编程实例,包括了python和C语言混合编程实例的使用技巧和注意事项,需要的朋友参考一下 最近为了测试网速情况怎么样,由于部分业务服务器需要关闭icmp,这样的话采用普通的ping就无法适应我的需求,于是自己简单的写了一个基于tcp端口的ping的程序,由于c执行效率比较的不错,但是开发效率低下,而python是开发效率高,但是执行效率不如C,由于需要大规模的
《汇编语言》(Assembly Language)是计算机专业中一门重要的基础课程,是一种面向机器的低级语言。它依赖于硬件,能通过巧妙的程序设计充分发挥硬件的潜力。汇编语言程序产生的代码运行效率高。因此,到目前为止,许多软件系统(例如操作系统等)的核心部分仍然用汇编语言来编写。
第19.3节介绍了一章中的字符串表示法,其主要重点是运算符重载,特别是特殊运算符
本文向大家介绍C语言编写Linux守护进程实例,包括了C语言编写Linux守护进程实例的使用技巧和注意事项,需要的朋友参考一下 守护进程(Daemon)是运行在后台的一种特殊进程。它独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件。守护进程是一种很有用的进 程。Linux的大多数服务器就是用守护进程实现的。比如,Internet服务器inetd,Web服务器httpd等。同时,守护进