Sqlite3比grep慢约6倍
我有一个包含1.88亿行的表格,还有一个包含1.88亿行的文本文件,如下所示:
CREATE TABLE trigram (count integer, A text, B text, C text)
time echo 'select * from trigram where C="mailman";'|sqlite3 3g.db
18.419 seconds.
time grep 'mailman$' N-Grams/3g
3.137 seconds
或者一个更复杂的查询,比如
time grep 'the [^ ]* mailman$' N-Grams/3g
2.879 seconds
time echo 'select * from trigram where A="the" and C="mailman";'|sqlite3 3g.db
15.839 seconds
有没有什么办法可以让sqlite3
运行得更快呢?
1 个回答
7
创建一个索引:
CREATE INDEX idx_trigram_col_c ON trigram(C);
然后再试一次。
如果你使用一个覆盖索引,第二个查询会更快:
CREATE INDEX idx_trigram_col_c ON trigram(C, A);
或者
CREATE INDEX idx_trigram_col_c ON trigram(A, C);
(如果这些列的数据分布不同,把值更多的那一列放在前面)。