Python工具箱系列(二十)

数据库操作应是所有合格程序员的基本功,写的一手好SQL对于数据分析师而言更是安身立命之本。大部分软件开发人员使用的数据库都是MySql/MariaDB,毕竟LAMP(linux+apache+mysql+php)曾经风靡一时。但开发人员真正的瑞士小军刀却是SQLite,它是世界上装机量第一的嵌入式数据库。

SQLite最初的构思是在一条军舰上进行的。当时在通用动力工作的SQLite的作者D.RichardHipp正在为美国海军编制一种在导弹驱逐舰上使用的程序。那个程序最初运行在HewlettPackard UNX(HPUX)上,后台使用Infomix数据库。对那个具体应用而言Informix有点儿太强大了。一个有经验的数据库管理员安装或升级Informix可能需要一整天。其实这个应用需要的只是一个自我包含的数据库,它易使用并能由程序控制。2000年1月Hipp开始和一个同事讨论关于创建一个简单的嵌入式SQL数据库的想法。这个数据库将使用C语言开发,同时这个数据库将不需要安装和管理支持。

◆2000年8月SQlite1.0发布。Hipp用B-tree替换了gdbm。

◆2004年SQlite从2.0升级到3.0。这个版本重点强化了国际化。程序体积继续保持240KB。

SQLite对标的不是MySQL、Oracle这类C/S结构数据库,而是文件系统。这样的场景基本都是对数据库高级特性(扩展、并发、权限)没什么需求时方便使用的。

经典的应用场景如下:

◆嵌入式数据库,开箱即用,sqlite数据库本身很小(windows下只有4Mb左右,主流linux都自带sqlite)。

◆数据量不多的情况下,如果系统只几万甚至几千条数据时,用sqlite是最适合的。

◆app中使用sqlite做缓存数据的存放,如登陆数据缓存,历史数据缓存等。

 

从2000年5月29日开始,SQLite就选择了C语言。直到今天,C也是实现SQLite这样软件库的最佳语言。

主要原因包括:

性能。像SQLite这样被密集使用的基础库需要有很好的性能,因为它对标于文件系统、甚至于内存操作,C语言很适合写这样有性能要求的程序。C语言有时被称为「便携式汇编语言」,让开发者能尽可能的接近底层硬件编码,同时保证跨平台的便携性。当然,也有其他的编程语言声称和C一样快或者更快,但没有一个能和C一样通用。

兼容性。目前几乎所有的系统都可以调用由C语言编写的库。

低依赖性。用C来编写库不会在运行时有太多的依赖。在最小的配置下,SQLite只需要C标准库里屈指可数的几个函数。

稳定性。这个稳定性是指语言的稳定性。C语言相对老旧但非常成熟可靠,但却正好很适合开发像SQLite这样更注重长期稳定的模块。

SQLite安装极为简单:

linux:不用安装,直接在命令行下输入sqlite3即可使用。

windows:访问SQlite官网,从Windows区下载预编译的二进制文件。需要下载sqlite-tools-win32-*.zip、sqlite-dll-win32-*.zip压缩文件。创建文件夹C:sqlite,并在此文件夹下解压上面两个压缩文件,将得到sqlite3.def、sqlite3.dll和sqlite3.exe文件。添加C:sqlite到PATH环境变量,最后在命令提示符下,使用sqlite3命令即可。

SQlite的使用也非常简单,直接使用命令进行相关的操作。

# 创建数据库
sqlite3 demo.db
# 显示数据库
.database
# 创建表
create table demo_table(id int,name text);
# 插入数据
insert into demo_table values(1,"chen");
# 查询
select * from demo_table;
# 退出
.quit

如果不喜欢使用命令行工具,也可以使用IDE工具。在VSCODE中,有专用的扩展支持如下图所示,非常方便。

Python工具箱系列(二十)

sqlite的不足包括:

◆不支持right join,当然left join是完全可以替代的。

◆视图(view)、触发器(trigger)功能受限。

◆事务处理能力受限(相较MySQL中的4种隔离级别而言)。

◆安全性不高,不具有MySQL中详细的权限管理功能,甚至sqlite数据文件的访问无需用户名密码。

◆支持的数据类型较少。SQLite原生支持5中数据类型:NULL、INTEGER、REAL、TEXT、BLOB。在SQLite中,所有数据最终都转化为该5中类型进行存储。在SQLite中不支持BOOLEAN,在存储时,会将false转换为0,true转换为1。同时SQLite不支持Date和Time数据类型,但是内置提供了一些时间操作函数,帮助用于转换为其他数据类型进行存储。

◆不建议基于网络的数据库访问。SQLite通常是内置在应用程序中的。如果数据和应用程序是分离的,则访问数据就需要访问网络。这样也是可行的,但不是最优选择。当数据和应用程序是分开在不同的物理设备上时,通常不选择SQLite。

◆不建议高并发时使用。

◆不建议用于大数据库的场景,毕竟超过150T,SQLite是无法承受的。

 

然而,尽管sqlite在功能完整性方面并不足以与其他关系型数据库相媲美,但考虑其拿来即用的特点,不失为程序员开发中的瑞士军刀。

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:Python工具箱系列(二十) - Python技术站

(0)
上一篇 2023年4月2日 下午4:16
下一篇 2023年4月2日

相关文章

  • Python工具箱系列(十五)

    前文讲述加解密时,直接将密钥写在了python源代码中,这肯定不是什么好的手法。应该将这类与代码加功效无关的信息保存到配置中,随时可以需要进行修改。从大的角度来看,配置无非就是以下方式: 保存到配置文件中,格式可以是txt/csv/ini/xml/yaml/json/其它特殊格式等; 保存到数据库中,数据库可以是本地的,也可以是远程的; 特殊情况下,配置信息…

    Python开发 2023年4月2日
    00
  • Python工具箱系列(十六)

    前面介绍了对称加密算法,本文将介绍密码学中另一类重要应用:消息摘要(Digest),什么是消息摘要?简单的定义是:对一份数据,进行一个单向的Hash函数,生成一个固定长度的Hash值,这个值就是这份数据的摘要,也称为指纹。 常见的摘要算法有: MD5 SHA1 SHA256 其它 特点如下:   无论输入的消息有多长,计算出来的消息摘要的长度总是固定的。例如…

    Python开发 2023年4月2日
    00
  • Python工具箱系列(十二)

    在计算机世界里只有二进制。唯有人类才会对数据进行类型与价值判断。例如,认为某些文件是文本文件、是WORD/EXCEL文件或者是图片。对于加密算法来说也是一样的,加解密算法处理的只是字节流,根本不关心所谓的文件类型。对于文件来说,存在以下基本操作: ◆ open ◆ close ◆ read ◆ write ◆ delete 在Unix世界中,更是将文件这一概…

    2023年4月2日
    00
  • Python工具箱系列(十四)

    上文介绍了命令行方式来对文件进行加解密操作。本文将继续在此基础上,实现一个快速简易的GUI界面方便操作,先上代码看效果。 import argparse import configparser import json import os import struct import sys from configparser import ConfigParse…

    2023年4月2日
    00
  • Python工具箱系列(二十四)

    不管多少人黑微软,微软出品的大多数产品都能够深入人心,成为精品。在数据库领域,微软为专业人士提供SQL Server(简称mssql)。为日常办公人士提供Access与Excel这两款数据存储与分析的神器。 SQL Server是微软在数据库领域打造的旗舰产品,使用起来安全、稳定、可靠,并且对于SQL语言的语法与特性支持的非常好。长期以来由于微软敌视开源运动…

    2023年3月31日
    00
  • Python工具箱系列(十三)

    上文介绍了使用AES算法进行文件加解密的代码。但是如果在代码中写死了(hardcode)文件名,每次要加解密文件都要去改python源代码,显然有些太笨了。为此,可以使用命令行参数来在不改动源代码的情况下,对命令行参数所指定的文件进行加/解密操作。也可以指定加解密后输出的文件名称,以方便使用。 我们如下约定: python文件名为aeshandler.py …

    Python开发 2023年4月2日
    00
  • Python工具箱系列(八)

    前面我们提到过,有以下工具都可以开发Python代码: 直接使用Python解释器。运行Python就可以得到一个交互式命令行界面,可以简单的测试代码。作为Python入门,写代码不超过10行,完全可用。如果想开发大型代码,这个真心很难用。 使用IPython,也是命令行界面,但内置非常方便的各种宏与功能。比单纯的Python交互界面强太多。在某些情况下,例…

    2023年4月2日
    00
  • Python工具箱系列(二十六)

    ClickHouse(Click Stream,Data WareHouse)是俄罗斯的 Yandex于2016年开源的用于在线分析处理查询(OLAP:Online Analytical Processing)MPP架构的列式存储数据库(DBMS:Database Management System),能够使用 SQL 查询实时生成分析数据报告。特别值得称道…

    Python开发 2023年3月31日
    00
合作推广
合作推广
分享本页
返回顶部