python3使用sqlite3构建本地持久化缓存的过程

更新时间：2023年11月07日 08:52:04 作者：Mike_Zhang

日常python开发中会遇到数据持久化的问题，今天记录下如何使用sqlite3进行数据持久化，并提供示例代码及数据查看工具,需要的朋友可以参考下

一、背景描述

python应用程序在运行过程中被kill掉（比如版本升级等情况），内存中的运行数据将会丢失，如果能够准实时将数据存储在缓存中，程序下次启动时将继续执行被kill之前的动作。

使用数据库作为持久化是笔记理想的选择，可现实情况可能需要python脚本进行本地持久化，相较于pickle等方式，sqlite3的持久化方式可扩展性比较强，方便后续迁移到mysql等数据库。

二、具体实现

1、基础使用示例

查看版本信息

import sqlite3
print(sqlite3.version_info) #显示sqlite3版本信息
print(sqlite3.sqlite_version) #显示SQLite版本信息

数据库创建或连接

conn = sqlite3.connect("test1.db")
cur = conn.cursor()

数据表创建

dbCreate = '''
CREATE TABLE user(
    user_id int,
    user_name text,
    password text
)
'''
cur.executescript(dbCreate)
conn.commit()

插入数据

conn.execute("INSERT INTO user (user_id,user_name,password) VALUES(1,'user1','123456')")
conn.commit()

查询数据

cursor = conn.execute("SELECT * FROM user")
for row in cursor.fetchall():
    print(row)

完整示例代码如下：

#! /usr/bin/env python3
#--*-- ebcoding:utf-8 --*--
import sqlite3
dbCreate = '''
CREATE TABLE user(
    user_id int,
    user_name text,
    password text
)
'''
# 创建或连接数据库
conn = sqlite3.connect("test1.db")
cur = conn.cursor()
cur.executescript(dbCreate)
conn.commit()
conn.execute("INSERT INTO user (user_id,user_name,password) VALUES(1,'user1','123456')")
conn.execute("INSERT INTO user (user_id,user_name,password) VALUES(2,'user2','123457')")
conn.commit()
cursor = conn.execute("SELECT * FROM user")
for row in cursor.fetchall():
    print(row)
conn.close()

运行效果：

生成的 test1.db 数据库文件可以使用 sqlitestudio 进行查看，软件运行效果如下：

下载地址：

https://sqlitestudio.pl/

如果下载过慢，可从如下文末提供的渠道获取。

2、代码封装示例

实际使用过程中，需要进行代码封装，以便后续使用，这里以通话记录为例演示下封装过程。

1）定义全局缓存 gDCdrData，用于在内存中存放数据；
2）定义全局队列 gQCDR ，用于数据传递；
3）定义sqlite3持久化文件，并定义保留时长；
4）创建 ObjCdrItem 类，用于定义item数据结构；
5）定义sqlite3管理类 ObjCDRMgr，用于管理sqlite3数据库；
6）启动 dataGenThrd 线程模拟数据创建；
7）启动 updateThrd 线程用于数据更新；
8）启动 cleanThrd 线程用于数据清理；

示例代码如下：

完整代码可从如下链接获取：

http://xiazai.jb51.net/202311/yuanma/sqlitestudio_jb51.rar

运行效果如下：

数据文件打开效果如下：

三、资源下载

http://xiazai.jb51.net/202311/yuanma/sqlitestudio_jb51.rar

以上源码免费提供大家，感谢支持！

到此这篇关于python3使用sqlite3构建本地持久化缓存的文章就介绍到这了,更多相关python3本地持久化缓存内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

.img/.hdr格式转.nii格式的操作
这篇文章主要介绍了.img/.hdr格式转.nii格式的操作，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2020-07-07
python实现最长公共子序列
这篇文章主要为大家详细介绍了python实现最长公共子序列的相关代码，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
2018-05-05
python Windows最新版本安装教程
这篇文章主要介绍了python Windows最新版本安装教程，是python的详细安装教程和环境变量的配置，需要的小伙伴可以参考一下，希望对你有所帮助
2022-02-02
Python通过getattr函数获取对象的属性值
这篇文章主要介绍了Python通过getattr函数获取对象的属性值,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2020-10-10
python爬取某网站原图作为壁纸
之前已经爬取过网站上的图片,貌似很简单可是他喵的都像马赛克一样,怎么能用做壁纸呢通过多重审查发现,原图地址藏在更深的地方所以,来爬一下原图吧,需要的朋友可以参考下
2021-06-06
1分钟快速生成用于网页内容提取的xslt
这篇文章主要教大家如何1分钟快速生成用于网页内容提取的xslt，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
2018-02-02
深入了解Python如何操作MongoDB
MongoDB是由C++语言编写的非关系型数据库，是一个基于分布式文件存储的开源数据库系统。本文主要介绍了如何通过Python操作MongoDB，需要的可以参考一下
2022-01-01
Python列表倒序输出及其效率详解
在本篇文章里小编给大家整理的是关于Python列表倒序输出及其效率详解内容，需要的朋友们学习下。
2020-03-03
Python3 导入上级目录中的模块实例
今天小编就为大家分享一篇Python3 导入上级目录中的模块实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2019-02-02
python configparser中默认值的设定方式
这篇文章主要介绍了python configparser中默认值的设定方式，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-02-02