从 SQLite 到 DuckDB：查询快 5 倍，存储减少 80%

文章预览

转自：InfoQ 作者：Trace 译者：明知山 Trace 从一开始就使用 SQLite 将所有数据存储在用户设备上。这是一个非常不错的选择—— SQLite 高度可靠，并且多种编程语言都提供了广泛支持。毕竟，它是全球部署最广泛的数据库之一。 Trace 是一款 macOS 时间追踪应用，可以监控你在 Mac 上的时间使用情况。鉴于它的功能，Trace 需要处理大量的数据，因此是一款数据密集型应用。尽管 SQLite 表现不错，但我们仍然面临两个关键挑战： 随着时间的推移，SQLite 数据库文件体积会显著增大。 随着数据集的增长，聚合查询响应速度开始变慢。 我们尝试了许多优化 SQLite 的方法，最好发现了 DuckDB：一个类似于 SQLite 的可嵌入式数据库系统，专为分析工作负载进行了优化。经过一段时间的测试，证明 DuckDB 比 SQLite 更适合我们的时间追踪应用。 为什么选择 DuckDB 我们需要 ………………………………