Sqlite

SQLiteOpenHelper

getReadableDatabase()getWritableDatabase()首先都会尝试以读写方式打开数据库。如果因为磁盘空间已满等原因导致以读写方式打开数据库失败,会改以只读方式打开。若只需要一个只读的数据库,可以使用SQLiteDatabase.OPEN_READONLY标志,通过SQLiteDatabase#openDatabase(String, CursorFactory, int)方法手动打开。上面两个方法成功返回后,会回调onOpen()方法,且OpenHelper会缓存该数据库实例。这两个方法调用时,如果因为数据库文件不存在需要创建会触发SQLiteOpenHelper#onCreate()回调,如果因为数据库版本不一致升或降会触发SQLiteOpenHelper#onUpgrade()SQLiteOpenHelper#onDowngrade()回调。

SQLiteDatabase打开模式

  • ROLLBACK JOURNAL: 当数据有更新时,先将需要修改的数据备份到journal文件中,然后修改数据库文件,当发生rollback,从journal日志中取出数据,并修改数据库文件,然后清除journal日志。在该模式下,写数据库操作会阻塞读操作,因为是直接写数据库文件,在写的时候读线程无法读取数据,并发性降低。
  • WAL(write ahead logging): 当开启了WAL模式更新数据时,会先将数据写入到*.db-wal文件中,而不是直接修改数据库文件,当执行checkpoint(需要同步wal文件和数据库文件的时间点)时或某个时间点才会将数据更新到数据库文件,当出现rollback也只是清除wal日志文件。从以上流程来看 WAL在数据更新上I/0量要小,所以写操作要快。,但是由于在读取数据时也需要读取WAL日志验证数据的正确性,所以读取数据相对要慢。 所以大家也要根据自己应用的场景去使用这种模式。开启WAL模式可以提高写入数据库的速度,读和写之间不会阻塞,但是写与写之间依然是阻塞的。多个线程可以同时读,但也只允许一个线程写,读写不会阻塞,提高了并发性。可通过SQLiteDatabase#enableWriteAheadLogging()方法或打开数据库时指定ENABLE_WRITE_AHEAD_LOGGING标志来启用该模式。

SQLiteDatabase事务

事务是一系列对数据库的更改操作,要么都成功,要么都失败。对数据库的更改都需要通过事务来完成。SQLite的数据库操作,除了SELECT之外,都会在内部开启事务来完成并自动提交,事务完成之后对数据库的更改要么成功,要么失败。

    db.beginTransaction();
    try {
        ...
        db.setTransactionSuccessful();
    } finally {
        db.endTransaction();
    }

db.beginTransaction();相当于execSQL("BEGIN EXCLUSIVE;");,在当前事务在没有结束之前任何其他线程或进程都无法对数据库进行读写操作。当开启WAL模式时,应该使用db.beginTransactionNonExclusive();。它相当于execSQL("BEGIN IMMEDIATE;");,它只会限制其他线程对数据库的写操作,不会阻塞读操作。WAL模式是能够提高并发性,读与写互不阻塞,而执行BEGIN EXCLUSIVE却降低了并发,互相矛盾,所以开启WAL的情况下应该使用BEGIN EXCLUSIVE,即使用beginTransactionNonExclusive();

    db.beginTransactionNonExclusive();
    try {
        ...
        db.setTransactionSuccessful();
    } finally {
        db.endTransaction();
    }

使用事务和SQLiteStatement提高批量插入性能

上面说到,Sqlitedatabase的操作,除了select以外,都会自动包装一个事务。如,我们执行一个insert语句,系统会先开启一个事务,最后自动提交事务更新数据库。在批量插入时,如果由系统来帮我们处理,那么每一个insert都对应一个事务,这样在每次自动提交事务都对应一次更新数据库的IO操作,严重影响执行效率。因此,我们可以通过手动开启事务的方式来禁用系统的自动提交,将我们的批量插入操作放到一个事务中执行,手动提交,只会对应一次IO操作,大大提高性能。此外,sql语句会转化为一个SQLiteStatement对象来进行处理,我们还可以预先编译SQLiteStatement并重用,而不是让系统每次insert都构造一个对应的statement对象,这样能提高内存的使用效率。具体的,批量操作应该如下:

        database.beginTransaction();
        try{

            SQLiteStatement statement = database.compileStatement(insertSql);
            while (...) {
                statement.clearBindings();//清除绑定关系
                statement.bindLong(0, 1L);//绑定数据
                statement.bindString(1, "xxx");
                statement.executeInsert();//执行
            }

            database.setTransactionSuccessful();
        }finally {
            database.endTransaction();
        }

数据库的锁级别

  • UNLOCKED:表示数据库此时并未被读写。
  • SHARED:表示数据库可以被读取。SHARED锁可以同时被多个线程拥有。一旦某个线程持有SHARED锁,就没有任何线程可以进行写操作。
  • RESERVED:表示准备写入数据库。RESERVED锁最多只能被一个线程拥有,此后它可以进入PENDING状态。
  • PENDING:表示即将写入数据库,正在等待其他读线程释放SHARED锁。一旦某个线程持有PENDING锁,其他线程就不能获取SHARED锁。这样一来,只要等所有读线程完成,释放SHARED锁后,它就可以进入EXCLUSIVE状态了。
  • EXCLUSIVE:表示它可以写入数据库了。进入这个状态后,其他任何线程都不能访问数据库文件。因此为了并发性,它的持有时间越短越好。

一个线程只有在拥有低级别的锁的时候,才能获取更高一级的锁。SQLite就是靠这5种类型的锁,巧妙地实现了读写线程的互斥。同时也可看出,写操作必须进入EXCLUSIVE状态,此时并发数被降到1,这也是SQLite被认为并发插入性能不好的原因。
另外,read-uncommitted和WAL模式会影响这个锁的机制。在这2种模式下,读线程不会被写线程阻塞,即使写线程持有PENDING或EXCLUSIVE锁。

Android中SQLiteDatabase相关的几个类

  • SQLiteConnection: 数据库连接对象,At any given time, a connection is either owned and used by a {SQLiteSession} object or the {SQLiteConnectionPool}
  • SQLiteConnectionPool: 数据库连接池,管理里面的SQLiteConnection。一般情况下,池中只维护一个可用的session,所以对数据库的读写效率不高。当启用WAL时,会建立多个数据库连接,一般为两个(android系统在编译时配置为系统属性),能提高数据库的并发性。
  • SQLiteSession: ThreadLocal类型的变量,每个线程持有自己的实例。用于管理transaction或者connection的生命周期;对database的操作都是通过session对象来完成的。session会从connectionpool中申请可用的connection,如果connection不可用,则操作会被阻塞,直到其他connection释放且获取后继续执行。
  • SQLiteDebug: 可以设置一些SQLite的日志开关,方便定位问题。

Multiple processes can have the same database open at the same time. Multiple processes can be doing a SELECT at the same time. But only one process can be making changes to the database at any moment in time, however.

数据库被锁定

Process: examples.lcd.sqlitepractice, PID: 22811
android.database.sqlite.SQLiteDatabaseLockedException: database is locked (Sqlite code 5), (OS error - 2:No such file or directory)
at android.database.sqlite.SQLiteConnection.nativeExecuteForChangedRowCount(Native Method)
at android.database.sqlite.SQLiteConnection.executeForChangedRowCount(SQLiteConnection.java:742)
at android.database.sqlite.SQLiteSession.executeForChangedRowCount(SQLiteSession.java:754)
at android.database.sqlite.SQLiteStatement.executeUpdateDelete(SQLiteStatement.java:64)
at android.database.sqlite.SQLiteDatabase.executeSql(SQLiteDatabase.java:1736)
at android.database.sqlite.SQLiteDatabase.execSQL(SQLiteDatabase.java:1660)
at examples.lcd.sqlitepractice.DbWriter.run(DbWriter.java:51)

参考链接
Android使用SQLITE3 WAL模式 并发处理
Android SQLite分析
Android事务 IMMEDIATE与EXCLUSIVE模式

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 196,099评论 5 462
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 82,473评论 2 373
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 143,229评论 0 325
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,570评论 1 267
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,427评论 5 358
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,335评论 1 273
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,737评论 3 386
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,392评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,693评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,730评论 2 312
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,512评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,349评论 3 314
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,750评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,017评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,290评论 1 251
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,706评论 2 342
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,904评论 2 335

推荐阅读更多精彩内容