コンテンツにスキップ

SQLite FTS5 で日本語を全文検索する#

Tech Notes #sqlite #fts5 #japanese updated 2026-04-13 1 min read

SQLite FTS5 のデフォルト tokenizer (unicode61) は日本語の分かち書きを行わず、「テスト」のようなクエリでは期待通りの結果が得られない。SQLite 3.34 以降で利用できる trigram tokenizer に切り替えれば、CJK 言語の全文検索が機能する。

設定例#

CREATE VIRTUAL TABLE entries_fts USING fts5(
  title, content, tags,
  content='entries',
  content_rowid='id',
  tokenize='trigram case_sensitive 0'
);

注意点#

  • 3 文字以上のクエリで動作する。2 文字以下の検索は別経路（LIKE 等）にフォールバックする実装が必要
  • インデックスサイズは unicode61 より大きくなるが、数百〜数千エントリ規模では実用上問題にならない
  • 検索精度に不満が出たら、ICU tokenizer や外部検索エンジン（Meilisearch 等）へのアップグレードパスを検討する

参考ソース#

関連エントリ#