小白初级问题，关于sqlite
[问题点数：20分，结帖人iaifeini]
小白初级问题，关于sqlite
[问题点数：20分，结帖人iaifeini]
不显示删除回复
显示所有回复
显示星级回复
显示得分回复
只显示楼主
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
2015年11月 移动开发大版内专家分月排行榜第二
匿名用户不能发表回复！|
每天回帖即可获得10分可用分！小技巧：
你还可以输入10000个字符
(Ctrl+Enter)
请遵守CSDN，不得违反国家法律法规。
转载文章请注明出自“CSDN（www.csdn.net）”。如是商业用途请联系原作者。应当使用SQLite的五个原因 - 推酷
应当使用SQLite的五个原因
作者：Charles Leifer
翻译：孙薇
责编：钱曙光，关注架构和算法领域，寻求报道或者投稿请发邮件，另有「CSDN 高级架构师群」，内有诸多知名互联网公司的大牛架构师，欢迎架构师加微信qshuguang2008申请入群，备注姓名+公司+职位。
SQLite 是非常优秀的数据库，能够在真实的生产环境中完成一些真正的工作。本文将列出五个我认为在2016年应当选用 SQLite 的原因。
不知你是否管理过 Postgres 数据库？想要确保数据库服务器正确配置，需要了解不少东西，比如共享缓存、有效缓存大小、work mem、work mem 的维护以及 wal 缓存等等。此外升级的过程也很恐怖，使用者需要先将数据库离线，运行程序来升级，然后祈祷在重新打开时能正常运作。另外，postgres 数据库具体在哪里呢？你能否指着某个地方说：“那就是我的数据库？”
虽然我们都知道，在很多情况下只有 Postgres（或 MySQL、Oracle、SQL Server 等）对应用的某些需求很有效果，不过这不是本文的讨论范围，本文只想强调管理 SQLite 数据库与传统数据库服务器之间的区别。
SQLite 便于管理——只有单个文件（有时候是一个文件+事务日志），这个文件的格式在多个主要版本中都是通用的，也就是说如果我有一个3.0.0版本（2004年）的 SQLite 数据库文件，便可以在最新的 SQLite 3.10.0上使用。如果想要在别处使用这个数据库文件，也只需复制到U盘里，甚至存放到云存储中。如果想要每天晚上进行备份，只需将此数据库文件同步到 S3。如果想要与同事分享我的数据分析，也只需给他们发送一份数据库文件备份即可。这个数据库的一大特性就是只有单文件，且文件格式多年以来非常稳定。
此外，SQLite 配置起来也很简单，其功能有两种管理方式：编译标识以及编译指示语句（运行时配置）。没有什么配置文件，只需使用想要的功能来构建相应的库，然后在建立数据库连接时配置运行时选项即可。
稳定性坚如磐石，且还在不断提高
目前有一些优秀的大牛工程师正在积极地进行 SQLite 的开发，使得 SQLite 新增高质量新功能的速度十分惊人。就在最近，SQLite 还加入了 json1 扩展程序以支持 JSON 数据，想要了解如何在 Python 中使用它，请查看
。SQLite 还发布了一个全文搜索扩展包的改进版，其中包括使用 BM25 算法对结果进行排序。
除了新增功能之外，SQLite 的开发者也在努力改进 library 的性能，在3.8.11版本的发布说明中，包含这些宣传内容：
新版本 SQLite，运行速度是3.8.0版本的两倍，是3.3.9版本的三倍。
尽管一直在更新和改进，SQLite 却很少有新增的 bug。SQLite 的测试套件公认是业内最好的测试套件之一，而“ SQLite 是如何测试的”相关文档也被频繁推荐到 HackerNews 上。
可扩展性与可控性
笔者最喜爱 SQLite 的地方是它的可扩展性，SQLite 是应用嵌入式的，它与应用运行在同一个地址空间中，并能代表你执行应用代码。在 Python 标准库中，无论是 SQLite 驱动的 pysqlite ，还是可选驱动 apsw 都为自定义 SQL 函数、聚合函数与排序规则提供了相应的 API；apsw 更进一步，为定义虚拟表和虚拟文件系统提供了相应的 API。
在实际案例中，假设表格中有一列用于存储 URL，你还想确定最常见的主机名是哪些——如果使用不同的数据库，就必须编写复杂的正则表达式（字符串操作函数组），或者将数据从应用中抽出来，然后在代码中进行计算。使用 SQLite 的话，就可以在 Python 中定义主机名，并使用它来创建简单的 COUNT 查询：
from urlparse import urlparse
def hostname(url):
return urlparse(url).netloc
conn = sqlite3.connect('my-database.db')
conn.create_function('hostname', 1, hostname)
# name, num_params, func
SELECT hostname(mytable.url), COUNT(mytable.id) AS ct
FROM mytable
GROUP BY hostname(mytable.url)
ORDER BY ct DESC;
还可以创建聚合函数，输入0……n的值，生成单独的输出值。样例可能包括：计算标准差、通过处理值来生成字符串、进行某种类型的分类等。
虚拟表目前仅受 apsw 支持，用户可以在代码中定义表格，并将其当作普通的 SQL 表格查询，即便后台数据是完全动态的。比如，我编写了一个简单的虚拟表格，
你也可以编写
，返回0……n行结果，比如正则表达式：处理输出内容，并生成一行行匹配 token。我写了一个库叫做
，用来编写这类函数非常简单。
实际上，SQLite 的各个方面都可以受应用的控制。
SQLite 速度非常快，它运行在同一台机器上，因此在执行查询或读取结果时并不产生网络开销。由于与应用运行在同一个地址空间中，因此并无连接协议、序列或通过 unix socket 通讯的需求。SQLite 也可以在资源匮乏、要求高效率的移动设备上运行，并支持大量的编译标记：允许用户移除没有计划使用的功能。
SQLite 的速度弥补了它的最大缺点之一：写入时数据库文件锁定。通过快速写入数据，只有当有大量的并发写入时，数据库锁定才会成为问题。
SQLite 的3.7.0发布版增加了新的日志记录方法：使用预写日志。单独来看这个消息并不太吸引人，但对于 web 应用开发者来说（或者要应付并发问题的开发者来说），这意味着读取并不会再阻碍写入了，反之亦然。或者换句话说，读取和写入能够并发进行。没有 WAL 模式的话，想要写入数据库则要求写入程序独占数据库的访问权，在写入完成前无法读取。
下面是一个样例，说明了两者的不同。假设我们有两个进程，一个写入、一个读取。写入程序开启了独占事务（表明打算写入）；读取程序开启事务；读取程序尝试发布SELECT语句：
Journal mode = &delete& (the default):
Writer: BEGIN EXCLUSIVE
Reader: BEGIN
Reader: SELECT * FROM Error: database is locked
Journal mode = &wal&:
Writer: BEGIN EXCLUSIVE
Reader: BEGIN
Reader: SELECT * FROM Returns table contents
然而值得注意的是：即使不启用 WAL 模式，写入通常在几毫秒中发生。这个时间太短了，用户只会在并发很高或者写入事务用时很长时才会注意到这个问题。
额外的原因：BerkeleyDB
由于只需锁定单独页面，而无需锁定整个数据库，集成了 SQLite 的 BerkeleyDB 可以给需求数据库并发访问的应用开发者有更好的体验。而且这样一来，BerkeleyDB 在并发数据库负载的情况下也能更高效地扩展，使得各事务无需争夺同一个页面内的数据。
BerkeleyDB 还支持多版本并发控制（MVCC），使得读取操作也可以继续在写入操作的同一个页面进行。
另外，BerkeleyDB 还有一个优势就是效率更高。换句话说，它使用的系统资源与调用系统都更少，可以参考
找到更多细节。
BerkeleyDB 的 SQL 接口是作为 SQLite 的简易替代，所支持的API与功能是相同的。BerkeleyDB 还提供了一些额外的功能，比如复制（SQLite 有备份程序，但在我看来效果不如 BDB 的强大）、加密，当然还有 BerkeleyDB 自身的所有功能。
使用 BerkeleyDB 主要的缺点在于：它对配置数值非常敏感，而了解正确的页面大小、缓存大小以及其他设置参数需要对相关知识有较深的了解。另一个缺点是证书问题：关于 BerkeleyDB 的证书问题请参考
想要查看如何编译 Python SQLite 驱动以使用 BerkeleyDB，请
我希望你们尝试一下 SQLite，别相信守旧者的说法：什么不适用于生产环境，或者不适合用在 web 应用中。
如果想要了解更多，SQLite 本身也有
，包括了在哪些情况下（一张列表） RDBMS 更好用。我有
，也许能引起你的兴趣。
日-15日，由CSDN重磅打造的
（CCTC 2016）将于5月13日-15日在北京举办，今年大会特设“中国Spark技术峰会”、“Container技术峰会”、“OpenStack技术峰会”、“大数据核心技术与应用实战峰会”四大技术主题峰会，以及“云计算核心技术架构”、“云计算平台构建与实践”等专场技术论坛。大会讲师阵容囊括Intel、微软、IBM、AWS、Hortonworks、Databricks、Elastic、百度、阿里、腾讯、华为、乐视、京东、小米、微博、迅雷、国家电网、中国移动、长安汽车、广发证券、民生银行、国家超级计算广州中心等60+顶级技术讲师，CCTC必将是中国云计算技术开发者的顶级盛会。目前会议门票限时7折（截止至4月29日24点），详情访问CCTC 2016官网。
已发表评论数()
请填写推刊名
描述不能大于100个字符!
权限设置： 公开
仅自己可见
正文不准确
标题不准确
排版有问题
主题不准确
没有分页内容
图片无法显示
视频无法显示
与原文不一致随时记录学习,工作中遇到的点滴"大问题,小问题"
今天遇到了一个问题,sqlite3提示数据库死锁,无法更新,奇怪的是可以插入,可以查询,可以删除,就是不可以更新,
经过近几个小时的排查,最终找到了问题的根源,
有一点点想法,就是问题大不大,关键看你懂不懂,或者说,问题解决没解决,如果没解决,那么就是个大问题
如果问题解决了,那么就是小问题,而且吧,这个小问题或大问题的定义因人而异,而经验而异,
在有些人眼里就是小儿科,在另外一些人眼里却是高深莫测的大问题,废话可真多啊,呵呵,其实就是一行代码引发的
是这样的,在业务逻辑层有一个Existed(实体 实例)方法,为了图方便当时的代码是这样的写的,当然现在意识到这样写的问题了,
近一点,先看错误的代码
&错误代码,不可复制//执行查询&&&&&&&&&&&&try&{&&&&&&&&&&&&&&&&return&db.ExecuteReader(&CommandType.Text,&sql,&parameters&).HasR&&&&&&&&&&&&}&catch(&Exception&exp&)&{&&&&&&&&&&&&&&&&throw&&&&&&&&&&&&&}
有发现问题吗?对了,返回的DataReader没有释放,直接导致了sqlite的死锁!
现修改如下
第一次修改后的正确的代码//执行查询&&&&&&&&&&&&try&{&&&&&&&&&&&&&&&&using(&DbDataReader&reader&=&db.ExecuteReader(&CommandType.Text,&sql,&parameters&)&)&{&&&&&&&&&&&&&&&&&&&&return&reader.HasR&&&&&&&&&&&&&&&&}&&&&&&&&&&&&}&catch(&Exception&exp&)&{&&&&&&&&&&&&&&&&throw&&&&&&&&&&&&&}
现在可以正常更新了~死锁问题如此产生,必将如此结束了
现在再来想一想,这个问题算大问题还是小问题呢?
第一次听到sqlite死锁时你认为它是个大问题还是个小问题呢?&
记录学习中的点点滴滴,一次书写,终生享用,人人为我,我为人人
阅读(...) 评论()在线等！！！求大神救命！！！我的sqlite插入的5条数据都没有显示
[问题点数：60分，结帖人baidu_]
在线等！！！求大神救命！！！我的sqlite插入的5条数据都没有显示
[问题点数：60分，结帖人baidu_]
不显示删除回复
显示所有回复
显示星级回复
显示得分回复
只显示楼主
2014年8月 移动开发大版内专家分月排行榜第三
2014年6月 移动开发大版内专家分月排行榜第一2014年3月 移动开发大版内专家分月排行榜第一
2014年11月 移动开发大版内专家分月排行榜第二2014年4月 移动开发大版内专家分月排行榜第二2014年2月 移动开发大版内专家分月排行榜第二
匿名用户不能发表回复！|
每天回帖即可获得10分可用分！小技巧：
你还可以输入10000个字符
(Ctrl+Enter)
请遵守CSDN，不得违反国家法律法规。
转载文章请注明出自“CSDN（www.csdn.net）”。如是商业用途请联系原作者。