Sqlite3比grep慢约6倍

3 投票
1 回答
693 浏览
提问于 2025-04-30 01:35

我有一个包含1.88亿行的表格,还有一个包含1.88亿行的文本文件,如下所示:

CREATE TABLE trigram (count integer, A text, B text, C text)
time echo 'select * from trigram where C="mailman";'|sqlite3 3g.db
18.419 seconds.
time grep 'mailman$' N-Grams/3g
3.137 seconds

或者一个更复杂的查询,比如

time grep 'the [^ ]* mailman$' N-Grams/3g 
2.879 seconds
time echo 'select * from trigram where A="the" and C="mailman";'|sqlite3 3g.db
15.839 seconds

有没有什么办法可以让sqlite3运行得更快呢?

暂无标签

1 个回答

7

创建一个索引:

CREATE INDEX idx_trigram_col_c ON trigram(C);

然后再试一次。

如果你使用一个覆盖索引,第二个查询会更快:

CREATE INDEX idx_trigram_col_c ON trigram(C, A);

或者

CREATE INDEX idx_trigram_col_c ON trigram(A, C);

(如果这些列的数据分布不同,把值更多的那一列放在前面)。

撰写回答