0000: 2f 2a 0a 2a 2a 20 32 30 31 34 20 4d 61 79 20 33 /*.** 2014 May 3
0010: 31 0a 2a 2a 0a 2a 2a 20 54 68 65 20 61 75 74 68 1.**.** The auth
0020: 6f 72 20 64 69 73 63 6c 61 69 6d 73 20 63 6f 70 or disclaims cop
0030: 79 72 69 67 68 74 20 74 6f 20 74 68 69 73 20 73 yright to this s
0040: 6f 75 72 63 65 20 63 6f 64 65 2e 20 20 49 6e 20 ource code. In
0050: 70 6c 61 63 65 20 6f 66 0a 2a 2a 20 61 20 6c 65 place of.** a le
0060: 67 61 6c 20 6e 6f 74 69 63 65 2c 20 68 65 72 65 gal notice, here
0070: 20 69 73 20 61 20 62 6c 65 73 73 69 6e 67 3a 0a is a blessing:.
0080: 2a 2a 0a 2a 2a 20 20 20 20 4d 61 79 20 79 6f 75 **.** May you
0090: 20 64 6f 20 67 6f 6f 64 20 61 6e 64 20 6e 6f 74 do good and not
00a0: 20 65 76 69 6c 2e 0a 2a 2a 20 20 20 20 4d 61 79 evil..** May
00b0: 20 79 6f 75 20 66 69 6e 64 20 66 6f 72 67 69 76 you find forgiv
00c0: 65 6e 65 73 73 20 66 6f 72 20 79 6f 75 72 73 65 eness for yourse
00d0: 6c 66 20 61 6e 64 20 66 6f 72 67 69 76 65 20 6f lf and forgive o
00e0: 74 68 65 72 73 2e 0a 2a 2a 20 20 20 20 4d 61 79 thers..** May
00f0: 20 79 6f 75 20 73 68 61 72 65 20 66 72 65 65 6c you share freel
0100: 79 2c 20 6e 65 76 65 72 20 74 61 6b 69 6e 67 20 y, never taking
0110: 6d 6f 72 65 20 74 68 61 6e 20 79 6f 75 20 67 69 more than you gi
0120: 76 65 2e 0a 2a 2a 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a ve..**.*********
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0170: 2a 2a 2a 2a 2a 0a 2a 2a 0a 2a 2f 0a 23 69 66 6e *****.**.*/.#ifn
0180: 64 65 66 20 5f 46 54 53 35 49 4e 54 5f 48 0a 23 def _FTS5INT_H.#
0190: 64 65 66 69 6e 65 20 5f 46 54 53 35 49 4e 54 5f define _FTS5INT_
01a0: 48 0a 0a 23 69 6e 63 6c 75 64 65 20 22 66 74 73 H..#include "fts
01b0: 35 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 73 5.h".#include "s
01c0: 71 6c 69 74 65 33 65 78 74 2e 68 22 0a 53 51 4c qlite3ext.h".SQL
01d0: 49 54 45 5f 45 58 54 45 4e 53 49 4f 4e 5f 49 4e ITE_EXTENSION_IN
01e0: 49 54 31 0a 0a 23 69 6e 63 6c 75 64 65 20 3c 73 IT1..#include <s
01f0: 74 72 69 6e 67 2e 68 3e 0a 23 69 6e 63 6c 75 64 tring.h>.#includ
0200: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 23 69 e <assert.h>..#i
0210: 66 6e 64 65 66 20 53 51 4c 49 54 45 5f 41 4d 41 fndef SQLITE_AMA
0220: 4c 47 41 4d 41 54 49 4f 4e 0a 0a 74 79 70 65 64 LGAMATION..typed
0230: 65 66 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72 ef unsigned char
0240: 20 20 75 38 3b 0a 74 79 70 65 64 65 66 20 75 6e u8;.typedef un
0250: 73 69 67 6e 65 64 20 69 6e 74 20 20 20 75 33 32 signed int u32
0260: 3b 0a 74 79 70 65 64 65 66 20 75 6e 73 69 67 6e ;.typedef unsign
0270: 65 64 20 73 68 6f 72 74 20 75 31 36 3b 0a 74 79 ed short u16;.ty
0280: 70 65 64 65 66 20 73 68 6f 72 74 20 69 31 36 3b pedef short i16;
0290: 0a 74 79 70 65 64 65 66 20 73 71 6c 69 74 65 33 .typedef sqlite3
02a0: 5f 69 6e 74 36 34 20 69 36 34 3b 0a 74 79 70 65 _int64 i64;.type
02b0: 64 65 66 20 73 71 6c 69 74 65 33 5f 75 69 6e 74 def sqlite3_uint
02c0: 36 34 20 75 36 34 3b 0a 0a 23 64 65 66 69 6e 65 64 u64;..#define
02d0: 20 41 72 72 61 79 53 69 7a 65 28 78 29 20 28 28 ArraySize(x) ((
02e0: 69 6e 74 29 28 73 69 7a 65 6f 66 28 78 29 20 2f int)(sizeof(x) /
02f0: 20 73 69 7a 65 6f 66 28 78 5b 30 5d 29 29 29 0a sizeof(x[0]))).
0300: 0a 23 64 65 66 69 6e 65 20 74 65 73 74 63 61 73 .#define testcas
0310: 65 28 78 29 0a 23 64 65 66 69 6e 65 20 41 4c 57 e(x).#define ALW
0320: 41 59 53 28 78 29 20 31 0a 23 64 65 66 69 6e 65 AYS(x) 1.#define
0330: 20 4e 45 56 45 52 28 78 29 20 30 0a 0a 23 64 65 NEVER(x) 0..#de
0340: 66 69 6e 65 20 4d 49 4e 28 78 2c 79 29 20 28 28 fine MIN(x,y) ((
0350: 28 78 29 20 3c 20 28 79 29 29 20 3f 20 28 78 29 (x) < (y)) ? (x)
0360: 20 3a 20 28 79 29 29 0a 23 64 65 66 69 6e 65 20 : (y)).#define
0370: 4d 41 58 28 78 2c 79 29 20 28 28 28 78 29 20 3e MAX(x,y) (((x) >
0380: 20 28 79 29 29 20 3f 20 28 78 29 20 3a 20 28 79 (y)) ? (x) : (y
0390: 29 29 0a 0a 2f 2a 0a 2a 2a 20 43 6f 6e 73 74 61 ))../*.** Consta
03a0: 6e 74 73 20 66 6f 72 20 74 68 65 20 6c 61 72 67 nts for the larg
03b0: 65 73 74 20 61 6e 64 20 73 6d 61 6c 6c 65 73 74 est and smallest
03c0: 20 70 6f 73 73 69 62 6c 65 20 36 34 2d 62 69 74 possible 64-bit
03d0: 20 73 69 67 6e 65 64 20 69 6e 74 65 67 65 72 73 signed integers
03e0: 2e 0a 2a 2f 0a 23 20 64 65 66 69 6e 65 20 4c 41 ..*/.# define LA
03f0: 52 47 45 53 54 5f 49 4e 54 36 34 20 20 28 30 78 RGEST_INT64 (0x
0400: 66 66 66 66 66 66 66 66 7c 28 28 28 69 36 34 29 ffffffff|(((i64)
0410: 30 78 37 66 66 66 66 66 66 66 29 3c 3c 33 32 29 0x7fffffff)<<32)
0420: 29 0a 23 20 64 65 66 69 6e 65 20 53 4d 41 4c 4c ).# define SMALL
0430: 45 53 54 5f 49 4e 54 36 34 20 28 28 28 69 36 34 EST_INT64 (((i64
0440: 29 2d 31 29 20 2d 20 4c 41 52 47 45 53 54 5f 49 )-1) - LARGEST_I
0450: 4e 54 36 34 29 0a 0a 23 65 6e 64 69 66 0a 0a 2f NT64)..#endif../
0460: 2a 20 54 72 75 6e 63 61 74 65 20 76 65 72 79 20 * Truncate very
0470: 6c 6f 6e 67 20 74 6f 6b 65 6e 73 20 74 6f 20 74 long tokens to t
0480: 68 69 73 20 6d 61 6e 79 20 62 79 74 65 73 2e 20 his many bytes.
0490: 48 61 72 64 20 6c 69 6d 69 74 20 69 73 20 0a 2a Hard limit is .*
04a0: 2a 20 28 36 35 35 33 36 2d 31 2d 31 2d 34 2d 39 * (65536-1-1-4-9
04b0: 29 3d 3d 36 35 35 32 31 20 62 79 74 65 73 2e 20 )==65521 bytes.
04c0: 54 68 65 20 6c 69 6d 69 74 69 6e 67 20 66 61 63 The limiting fac
04d0: 74 6f 72 20 69 73 20 74 68 65 20 31 36 2d 62 69 tor is the 16-bi
04e0: 74 20 6f 66 66 73 65 74 0a 2a 2a 20 66 69 65 6c t offset.** fiel
04f0: 64 20 74 68 61 74 20 6f 63 63 75 72 73 20 61 74 d that occurs at
0500: 20 74 68 65 20 73 74 61 72 74 20 6f 66 20 65 61 the start of ea
0510: 63 68 20 6c 65 61 66 20 70 61 67 65 20 28 73 65 ch leaf page (se
0520: 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 29 2e e fts5_index.c).
0530: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 */.#define FTS5
0540: 5f 4d 41 58 5f 54 4f 4b 45 4e 5f 53 49 5a 45 20 _MAX_TOKEN_SIZE
0550: 33 32 37 36 38 0a 0a 2f 2a 0a 2a 2a 20 4d 61 78 32768../*.** Max
0560: 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f 66 20 70 imum number of p
0570: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 6f 6e refix indexes on
0580: 20 73 69 6e 67 6c 65 20 46 54 53 35 20 74 61 62 single FTS5 tab
0590: 6c 65 2e 20 54 68 69 73 20 6d 75 73 74 20 62 65 le. This must be
05a0: 0a 2a 2a 20 6c 65 73 73 20 74 68 61 6e 20 33 32 .** less than 32
05b0: 2e 20 49 66 20 69 74 20 69 73 20 73 65 74 20 74 . If it is set t
05c0: 6f 20 61 6e 79 74 68 69 6e 67 20 6c 61 72 67 65 o anything large
05d0: 20 74 68 61 6e 20 74 68 61 74 2c 20 61 6e 20 23 than that, an #
05e0: 65 72 72 6f 72 0a 2a 2a 20 64 69 72 65 63 74 69 error.** directi
05f0: 76 65 20 69 6e 20 66 74 73 35 5f 69 6e 64 65 78 ve in fts5_index
0600: 2e 63 20 77 69 6c 6c 20 63 61 75 73 65 20 74 68 .c will cause th
0610: 65 20 62 75 69 6c 64 20 74 6f 20 66 61 69 6c 2e e build to fail.
0620: 0a 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 .*/.#define FTS5
0630: 5f 4d 41 58 5f 50 52 45 46 49 58 5f 49 4e 44 45 _MAX_PREFIX_INDE
0640: 58 45 53 20 33 31 0a 0a 23 64 65 66 69 6e 65 20 XES 31..#define
0650: 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 4e 45 41 FTS5_DEFAULT_NEA
0660: 52 44 49 53 54 20 31 30 0a 23 64 65 66 69 6e 65 RDIST 10.#define
0670: 20 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 52 41 FTS5_DEFAULT_RA
0680: 4e 4b 20 20 20 20 20 22 62 6d 32 35 22 0a 0a 2f NK "bm25"../
0690: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 61 * Name of rank a
06a0: 6e 64 20 72 6f 77 69 64 20 63 6f 6c 75 6d 6e 73 nd rowid columns
06b0: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 */.#define FTS5
06c0: 5f 52 41 4e 4b 5f 4e 41 4d 45 20 22 72 61 6e 6b _RANK_NAME "rank
06d0: 22 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 52 ".#define FTS5_R
06e0: 4f 57 49 44 5f 4e 41 4d 45 20 22 72 6f 77 69 64 OWID_NAME "rowid
06f0: 22 0a 0a 23 69 66 64 65 66 20 53 51 4c 49 54 45 "..#ifdef SQLITE
0700: 5f 44 45 42 55 47 0a 23 20 64 65 66 69 6e 65 20 _DEBUG.# define
0710: 46 54 53 35 5f 43 4f 52 52 55 50 54 20 73 71 6c FTS5_CORRUPT sql
0720: 69 74 65 33 46 74 73 35 43 6f 72 72 75 70 74 28 ite3Fts5Corrupt(
0730: 29 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 ).int sqlite3Fts
0740: 35 43 6f 72 72 75 70 74 28 76 6f 69 64 29 3b 0a 5Corrupt(void);.
0750: 23 65 6c 73 65 0a 23 20 64 65 66 69 6e 65 20 46 #else.# define F
0760: 54 53 35 5f 43 4f 52 52 55 50 54 20 53 51 4c 49 TS5_CORRUPT SQLI
0770: 54 45 5f 43 4f 52 52 55 50 54 5f 56 54 41 42 0a TE_CORRUPT_VTAB.
0780: 23 65 6e 64 69 66 0a 0a 2f 2a 0a 2a 2a 20 54 68 #endif../*.** Th
0790: 65 20 61 73 73 65 72 74 5f 6e 63 28 29 20 6d 61 e assert_nc() ma
07a0: 63 72 6f 20 69 73 20 73 69 6d 69 6c 61 72 20 74 cro is similar t
07b0: 6f 20 74 68 65 20 61 73 73 65 72 74 28 29 20 6d o the assert() m
07c0: 61 63 72 6f 2c 20 65 78 63 65 70 74 20 74 68 61 acro, except tha
07d0: 74 20 69 74 0a 2a 2a 20 69 73 20 75 73 65 64 20 t it.** is used
07e0: 66 6f 72 20 61 73 73 65 72 74 28 29 20 63 6f 6e for assert() con
07f0: 64 69 74 69 6f 6e 73 20 74 68 61 74 20 61 72 65 ditions that are
0800: 20 74 72 75 65 20 6f 6e 6c 79 20 69 66 20 69 74 true only if it
0810: 20 63 61 6e 20 62 65 20 0a 2a 2a 20 67 75 72 61 can be .** gura
0820: 6e 74 65 65 64 20 74 68 61 74 20 74 68 65 20 64 nteed that the d
0830: 61 74 61 62 61 73 65 20 69 73 20 6e 6f 74 20 63 atabase is not c
0840: 6f 72 72 75 70 74 2e 0a 2a 2f 0a 23 69 66 64 65 orrupt..*/.#ifde
0850: 66 20 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 65 f SQLITE_DEBUG.e
0860: 78 74 65 72 6e 20 69 6e 74 20 73 71 6c 69 74 65 xtern int sqlite
0870: 33 5f 66 74 73 35 5f 6d 61 79 5f 62 65 5f 63 6f 3_fts5_may_be_co
0880: 72 72 75 70 74 3b 0a 23 20 64 65 66 69 6e 65 20 rrupt;.# define
0890: 61 73 73 65 72 74 5f 6e 63 28 78 29 20 61 73 73 assert_nc(x) ass
08a0: 65 72 74 28 73 71 6c 69 74 65 33 5f 66 74 73 35 ert(sqlite3_fts5
08b0: 5f 6d 61 79 5f 62 65 5f 63 6f 72 72 75 70 74 20 _may_be_corrupt
08c0: 7c 7c 20 28 78 29 29 0a 23 65 6c 73 65 0a 23 20 || (x)).#else.#
08d0: 64 65 66 69 6e 65 20 61 73 73 65 72 74 5f 6e 63 define assert_nc
08e0: 28 78 29 20 61 73 73 65 72 74 28 78 29 0a 23 65 (x) assert(x).#e
08f0: 6e 64 69 66 0a 0a 2f 2a 20 4d 61 72 6b 20 61 20 ndif../* Mark a
0900: 66 75 6e 63 74 69 6f 6e 20 70 61 72 61 6d 65 74 function paramet
0910: 65 72 20 61 73 20 75 6e 75 73 65 64 2c 20 74 6f er as unused, to
0920: 20 73 75 70 70 72 65 73 73 20 6e 75 69 73 61 6e suppress nuisan
0930: 63 65 20 63 6f 6d 70 69 6c 65 72 0a 2a 2a 20 77 ce compiler.** w
0940: 61 72 6e 69 6e 67 73 2e 20 2a 2f 0a 23 69 66 6e arnings. */.#ifn
0950: 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41 4d def UNUSED_PARAM
0960: 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53 45 44 .# define UNUSED
0970: 5f 50 41 52 41 4d 28 58 29 20 20 28 76 6f 69 64 _PARAM(X) (void
0980: 29 28 58 29 0a 23 65 6e 64 69 66 0a 0a 23 69 66 )(X).#endif..#if
0990: 6e 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41 ndef UNUSED_PARA
09a0: 4d 32 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53 M2.# define UNUS
09b0: 45 44 5f 50 41 52 41 4d 32 28 58 2c 20 59 29 20 ED_PARAM2(X, Y)
09c0: 20 28 76 6f 69 64 29 28 58 29 2c 20 28 76 6f 69 (void)(X), (voi
09d0: 64 29 28 59 29 0a 23 65 6e 64 69 66 0a 0a 74 79 d)(Y).#endif..ty
09e0: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 pedef struct Fts
09f0: 35 47 6c 6f 62 61 6c 20 46 74 73 35 47 6c 6f 62 5Global Fts5Glob
0a00: 61 6c 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 al;.typedef stru
0a10: 63 74 20 46 74 73 35 43 6f 6c 73 65 74 20 46 74 ct Fts5Colset Ft
0a20: 73 35 43 6f 6c 73 65 74 3b 0a 0a 2f 2a 20 49 66 s5Colset;../* If
0a30: 20 61 20 4e 45 41 52 28 29 20 63 6c 75 6d 70 20 a NEAR() clump
0a40: 6f 72 20 70 68 72 61 73 65 20 6d 61 79 20 6f 6e or phrase may on
0a50: 6c 79 20 6d 61 74 63 68 20 61 20 73 70 65 63 69 ly match a speci
0a60: 66 69 63 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d fic set of colum
0a70: 6e 73 2c 20 0a 2a 2a 20 74 68 65 6e 20 61 6e 20 ns, .** then an
0a80: 6f 62 6a 65 63 74 20 6f 66 20 74 68 65 20 66 6f object of the fo
0a90: 6c 6c 6f 77 69 6e 67 20 74 79 70 65 20 69 73 20 llowing type is
0aa0: 75 73 65 64 20 74 6f 20 72 65 63 6f 72 64 20 74 used to record t
0ab0: 68 65 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d 6e he set of column
0ac0: 73 2e 0a 2a 2a 20 45 61 63 68 20 65 6e 74 72 79 s..** Each entry
0ad0: 20 69 6e 20 74 68 65 20 61 69 43 6f 6c 5b 5d 20 in the aiCol[]
0ae0: 61 72 72 61 79 20 69 73 20 61 20 63 6f 6c 75 6d array is a colum
0af0: 6e 20 74 68 61 74 20 6d 61 79 20 62 65 20 6d 61 n that may be ma
0b00: 74 63 68 65 64 2e 0a 2a 2a 0a 2a 2a 20 54 68 69 tched..**.** Thi
0b10: 73 20 6f 62 6a 65 63 74 20 69 73 20 75 73 65 64 s object is used
0b20: 20 62 79 20 66 74 73 35 5f 65 78 70 72 2e 63 20 by fts5_expr.c
0b30: 61 6e 64 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 and fts5_index.c
0b40: 2e 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74 73 35 ..*/.struct Fts5
0b50: 43 6f 6c 73 65 74 20 7b 0a 20 20 69 6e 74 20 6e Colset {. int n
0b60: 43 6f 6c 3b 0a 20 20 69 6e 74 20 61 69 43 6f 6c Col;. int aiCol
0b70: 5b 31 5d 3b 0a 7d 3b 0a 0a 0a 0a 2f 2a 2a 2a 2a [1];.};..../****
0b80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0b90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0ba0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0bb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
0bc0: 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 ******.** Interf
0bd0: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 ace to code in f
0be0: 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 20 66 74 ts5_config.c. ft
0bf0: 73 35 5f 63 6f 6e 66 69 67 2e 63 20 63 6f 6e 74 s5_config.c cont
0c00: 61 69 6e 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f ains contains co
0c10: 64 65 0a 2a 2a 20 74 6f 20 70 61 72 73 65 20 74 de.** to parse t
0c20: 68 65 20 61 72 67 75 6d 65 6e 74 73 20 70 61 73 he arguments pas
0c30: 73 65 64 20 74 6f 20 74 68 65 20 43 52 45 41 54 sed to the CREAT
0c40: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20 E VIRTUAL TABLE
0c50: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2f 0a 0a 74 statement..*/..t
0c60: 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 ypedef struct Ft
0c70: 73 35 43 6f 6e 66 69 67 20 46 74 73 35 43 6f 6e s5Config Fts5Con
0c80: 66 69 67 3b 0a 0a 2f 2a 0a 2a 2a 20 41 6e 20 69 fig;../*.** An i
0c90: 6e 73 74 61 6e 63 65 20 6f 66 20 74 68 65 20 66 nstance of the f
0ca0: 6f 6c 6c 6f 77 69 6e 67 20 73 74 72 75 63 74 75 ollowing structu
0cb0: 72 65 20 65 6e 63 6f 64 65 73 20 61 6c 6c 20 69 re encodes all i
0cc0: 6e 66 6f 72 6d 61 74 69 6f 6e 20 74 68 61 74 20 nformation that
0cd0: 63 61 6e 0a 2a 2a 20 62 65 20 67 6c 65 61 6e 65 can.** be gleane
0ce0: 64 20 66 72 6f 6d 20 74 68 65 20 43 52 45 41 54 d from the CREAT
0cf0: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20 E VIRTUAL TABLE
0d00: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2a 0a 2a 2a statement..**.**
0d10: 20 41 6e 64 20 61 6c 6c 20 69 6e 66 6f 72 6d 61 And all informa
0d20: 74 69 6f 6e 20 6c 6f 61 64 65 64 20 66 72 6f 6d tion loaded from
0d30: 20 74 68 65 20 25 5f 63 6f 6e 66 69 67 20 74 61 the %_config ta
0d40: 62 6c 65 2e 0a 2a 2a 0a 2a 2a 20 6e 41 75 74 6f ble..**.** nAuto
0d50: 6d 65 72 67 65 3a 0a 2a 2a 20 20 20 54 68 65 20 merge:.** The
0d60: 6d 69 6e 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f minimum number o
0d70: 66 20 73 65 67 6d 65 6e 74 73 20 74 68 61 74 20 f segments that
0d80: 61 6e 20 61 75 74 6f 2d 6d 65 72 67 65 20 6f 70 an auto-merge op
0d90: 65 72 61 74 69 6f 6e 20 73 68 6f 75 6c 64 0a 2a eration should.*
0da0: 2a 20 20 20 61 74 74 65 6d 70 74 20 74 6f 20 6d * attempt to m
0db0: 65 72 67 65 20 74 6f 67 65 74 68 65 72 2e 20 41 erge together. A
0dc0: 20 76 61 6c 75 65 20 6f 66 20 31 20 73 65 74 73 value of 1 sets
0dd0: 20 74 68 65 20 6f 62 6a 65 63 74 20 74 6f 20 75 the object to u
0de0: 73 65 20 74 68 65 20 0a 2a 2a 20 20 20 63 6f 6d se the .** com
0df0: 70 69 6c 65 20 74 69 6d 65 20 64 65 66 61 75 6c pile time defaul
0e00: 74 2e 20 5a 65 72 6f 20 64 69 73 61 62 6c 65 73 t. Zero disables
0e10: 20 61 75 74 6f 2d 6d 65 72 67 65 20 61 6c 74 6f auto-merge alto
0e20: 67 65 74 68 65 72 2e 0a 2a 2a 0a 2a 2a 20 7a 43 gether..**.** zC
0e30: 6f 6e 74 65 6e 74 3a 0a 2a 2a 0a 2a 2a 20 7a 43 ontent:.**.** zC
0e40: 6f 6e 74 65 6e 74 52 6f 77 69 64 3a 0a 2a 2a 20 ontentRowid:.**
0e50: 20 20 54 68 65 20 76 61 6c 75 65 20 6f 66 20 74 The value of t
0e60: 68 65 20 63 6f 6e 74 65 6e 74 5f 72 6f 77 69 64 he content_rowid
0e70: 3d 20 6f 70 74 69 6f 6e 2c 20 69 66 20 6f 6e 65 = option, if one
0e80: 20 77 61 73 20 73 70 65 63 69 66 69 65 64 2e 20 was specified.
0e90: 4f 72 20 0a 2a 2a 20 20 20 74 68 65 20 73 74 72 Or .** the str
0ea0: 69 6e 67 20 22 72 6f 77 69 64 22 20 6f 74 68 65 ing "rowid" othe
0eb0: 72 77 69 73 65 2e 20 54 68 69 73 20 74 65 78 74 rwise. This text
0ec0: 20 69 73 20 6e 6f 74 20 71 75 6f 74 65 64 20 2d is not quoted -
0ed0: 20 69 66 20 69 74 20 69 73 0a 2a 2a 20 20 20 75 if it is.** u
0ee0: 73 65 64 20 61 73 20 70 61 72 74 20 6f 66 20 61 sed as part of a
0ef0: 6e 20 53 51 4c 20 73 74 61 74 65 6d 65 6e 74 20 n SQL statement
0f00: 69 74 20 6e 65 65 64 73 20 74 6f 20 62 65 20 71 it needs to be q
0f10: 75 6f 74 65 64 20 61 70 70 72 6f 70 72 69 61 74 uoted appropriat
0f20: 65 6c 79 2e 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74 ely..**.** zCont
0f30: 65 6e 74 45 78 70 72 6c 69 73 74 3a 0a 2a 2a 0a entExprlist:.**.
0f40: 2a 2a 20 70 7a 45 72 72 6d 73 67 3a 0a 2a 2a 20 ** pzErrmsg:.**
0f50: 20 20 54 68 69 73 20 65 78 69 73 74 73 20 69 6e This exists in
0f60: 20 6f 72 64 65 72 20 74 6f 20 61 6c 6c 6f 77 20 order to allow
0f70: 74 68 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 the fts5_index.c
0f80: 20 6d 6f 64 75 6c 65 20 74 6f 20 72 65 74 75 72 module to retur
0f90: 6e 20 61 20 0a 2a 2a 20 20 20 64 65 63 65 6e 74 n a .** decent
0fa0: 20 65 72 72 6f 72 20 6d 65 73 73 61 67 65 20 69 error message i
0fb0: 66 20 69 74 20 65 6e 63 6f 75 6e 74 65 72 73 20 f it encounters
0fc0: 61 20 66 69 6c 65 2d 66 6f 72 6d 61 74 20 76 65 a file-format ve
0fd0: 72 73 69 6f 6e 20 69 74 20 64 6f 65 73 0a 2a 2a rsion it does.**
0fe0: 20 20 20 6e 6f 74 20 75 6e 64 65 72 73 74 61 6e not understan
0ff0: 64 2e 0a 2a 2a 0a 2a 2a 20 62 43 6f 6c 75 6d 6e d..**.** bColumn
1000: 73 69 7a 65 3a 0a 2a 2a 20 20 20 54 72 75 65 20 size:.** True
1010: 69 66 20 74 68 65 20 25 5f 64 6f 63 73 69 7a 65 if the %_docsize
1020: 20 74 61 62 6c 65 20 69 73 20 63 72 65 61 74 65 table is create
1030: 64 2e 0a 2a 2a 0a 2a 2a 20 62 50 72 65 66 69 78 d..**.** bPrefix
1040: 49 6e 64 65 78 3a 0a 2a 2a 20 20 20 54 68 69 73 Index:.** This
1050: 20 69 73 20 6f 6e 6c 79 20 75 73 65 64 20 66 6f is only used fo
1060: 72 20 64 65 62 75 67 67 69 6e 67 2e 20 49 66 20 r debugging. If
1070: 73 65 74 20 74 6f 20 66 61 6c 73 65 2c 20 61 6e set to false, an
1080: 79 20 70 72 65 66 69 78 20 69 6e 64 65 78 65 73 y prefix indexes
1090: 0a 2a 2a 20 20 20 61 72 65 20 69 67 6e 6f 72 65 .** are ignore
10a0: 64 2e 20 54 68 69 73 20 76 61 6c 75 65 20 69 73 d. This value is
10b0: 20 63 6f 6e 66 69 67 75 72 65 64 20 75 73 69 6e configured usin
10c0: 67 3a 0a 2a 2a 0a 2a 2a 20 20 20 20 20 20 20 49 g:.**.** I
10d0: 4e 53 45 52 54 20 49 4e 54 4f 20 74 62 6c 28 74 NSERT INTO tbl(t
10e0: 62 6c 2c 20 72 61 6e 6b 29 20 56 41 4c 55 45 53 bl, rank) VALUES
10f0: 28 27 70 72 65 66 69 78 2d 69 6e 64 65 78 27 2c ('prefix-index',
1100: 20 24 62 50 72 65 66 69 78 49 6e 64 65 78 29 3b $bPrefixIndex);
1110: 0a 2a 2a 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74 .**.*/.struct Ft
1120: 73 35 43 6f 6e 66 69 67 20 7b 0a 20 20 73 71 6c s5Config {. sql
1130: 69 74 65 33 20 2a 64 62 3b 20 20 20 20 20 20 20 ite3 *db;
1140: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
1150: 44 61 74 61 62 61 73 65 20 68 61 6e 64 6c 65 20 Database handle
1160: 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 44 62 3b 20 */. char *zDb;
1170: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1180: 20 20 20 20 20 2f 2a 20 44 61 74 61 62 61 73 65 /* Database
1190: 20 68 6f 6c 64 69 6e 67 20 46 54 53 20 69 6e 64 holding FTS ind
11a0: 65 78 20 28 65 2e 67 2e 20 22 6d 61 69 6e 22 29 ex (e.g. "main")
11b0: 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 4e 61 6d */. char *zNam
11c0: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 e;
11d0: 20 20 20 20 20 20 2f 2a 20 4e 61 6d 65 20 6f 66 /* Name of
11e0: 20 46 54 53 20 69 6e 64 65 78 20 2a 2f 0a 20 20 FTS index */.
11f0: 69 6e 74 20 6e 43 6f 6c 3b 20 20 20 20 20 20 20 int nCol;
1200: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1210: 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 63 6f 6c /* Number of col
1220: 75 6d 6e 73 20 2a 2f 0a 20 20 63 68 61 72 20 2a umns */. char *
1230: 2a 61 7a 43 6f 6c 3b 20 20 20 20 20 20 20 20 20 *azCol;
1240: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c /* Col
1250: 75 6d 6e 20 6e 61 6d 65 73 20 2a 2f 0a 20 20 75 umn names */. u
1260: 38 20 2a 61 62 55 6e 69 6e 64 65 78 65 64 3b 20 8 *abUnindexed;
1270: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
1280: 2a 20 54 72 75 65 20 66 6f 72 20 75 6e 69 6e 64 * True for unind
1290: 65 78 65 64 20 63 6f 6c 75 6d 6e 73 20 2a 2f 0a exed columns */.
12a0: 20 20 69 6e 74 20 6e 50 72 65 66 69 78 3b 20 20 int nPrefix;
12b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
12c0: 20 20 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 70 /* Number of p
12d0: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a 2f refix indexes */
12e0: 0a 20 20 69 6e 74 20 2a 61 50 72 65 66 69 78 3b . int *aPrefix;
12f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1300: 20 20 20 2f 2a 20 53 69 7a 65 73 20 69 6e 20 62 /* Sizes in b
1310: 79 74 65 73 20 6f 66 20 6e 50 72 65 66 69 78 20 ytes of nPrefix
1320: 70 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a prefix indexes *
1330: 2f 0a 20 20 69 6e 74 20 65 43 6f 6e 74 65 6e 74 /. int eContent
1340: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 ;
1350: 20 20 20 20 2f 2a 20 41 6e 20 46 54 53 35 5f 43 /* An FTS5_C
1360: 4f 4e 54 45 4e 54 20 76 61 6c 75 65 20 2a 2f 0a ONTENT value */.
1370: 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74 65 6e 74 char *zContent
1380: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 ;
1390: 20 20 2f 2a 20 63 6f 6e 74 65 6e 74 20 74 61 62 /* content tab
13a0: 6c 65 20 2a 2f 20 0a 20 20 63 68 61 72 20 2a 7a le */ . char *z
13b0: 43 6f 6e 74 65 6e 74 52 6f 77 69 64 3b 20 20 20 ContentRowid;
13c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 22 63 6f 6e /* "con
13d0: 74 65 6e 74 5f 72 6f 77 69 64 3d 22 20 6f 70 74 tent_rowid=" opt
13e0: 69 6f 6e 20 76 61 6c 75 65 20 2a 2f 20 0a 20 20 ion value */ .
13f0: 69 6e 74 20 62 43 6f 6c 75 6d 6e 73 69 7a 65 3b int bColumnsize;
1400: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1410: 2f 2a 20 22 63 6f 6c 75 6d 6e 73 69 7a 65 3d 22 /* "columnsize="
1420: 20 6f 70 74 69 6f 6e 20 76 61 6c 75 65 20 28 64 option value (d
1430: 66 6c 74 3d 3d 31 29 20 2a 2f 0a 20 20 69 6e 74 flt==1) */. int
1440: 20 65 44 65 74 61 69 6c 3b 20 20 20 20 20 20 20 eDetail;
1450: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
1460: 46 54 53 35 5f 44 45 54 41 49 4c 5f 58 58 58 20 FTS5_DETAIL_XXX
1470: 76 61 6c 75 65 20 2a 2f 0a 20 20 63 68 61 72 20 value */. char
1480: 2a 7a 43 6f 6e 74 65 6e 74 45 78 70 72 6c 69 73 *zContentExprlis
1490: 74 3b 0a 20 20 46 74 73 35 54 6f 6b 65 6e 69 7a t;. Fts5Tokeniz
14a0: 65 72 20 2a 70 54 6f 6b 3b 0a 20 20 66 74 73 35 er *pTok;. fts5
14b0: 5f 74 6f 6b 65 6e 69 7a 65 72 20 2a 70 54 6f 6b _tokenizer *pTok
14c0: 41 70 69 3b 0a 0a 20 20 2f 2a 20 56 61 6c 75 65 Api;.. /* Value
14d0: 73 20 6c 6f 61 64 65 64 20 66 72 6f 6d 20 74 68 s loaded from th
14e0: 65 20 25 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 e %_config table
14f0: 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f 6f 6b 69 */. int iCooki
1500: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 e;
1510: 20 20 20 20 20 20 2f 2a 20 49 6e 63 72 65 6d 65 /* Increme
1520: 6e 74 65 64 20 77 68 65 6e 20 25 5f 63 6f 6e 66 nted when %_conf
1530: 69 67 20 69 73 20 6d 6f 64 69 66 69 65 64 20 2a ig is modified *
1540: 2f 0a 20 20 69 6e 74 20 70 67 73 7a 3b 20 20 20 /. int pgsz;
1550: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1560: 20 20 20 20 2f 2a 20 41 70 70 72 6f 78 69 6d 61 /* Approxima
1570: 74 65 20 70 61 67 65 20 73 69 7a 65 20 75 73 65 te page size use
1580: 64 20 69 6e 20 25 5f 64 61 74 61 20 2a 2f 0a 20 d in %_data */.
1590: 20 69 6e 74 20 6e 41 75 74 6f 6d 65 72 67 65 3b int nAutomerge;
15a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
15b0: 20 2f 2a 20 27 61 75 74 6f 6d 65 72 67 65 27 20 /* 'automerge'
15c0: 73 65 74 74 69 6e 67 20 2a 2f 0a 20 20 69 6e 74 setting */. int
15d0: 20 6e 43 72 69 73 69 73 4d 65 72 67 65 3b 20 20 nCrisisMerge;
15e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
15f0: 4d 61 78 69 6d 75 6d 20 61 6c 6c 6f 77 65 64 20 Maximum allowed
1600: 73 65 67 6d 65 6e 74 73 20 70 65 72 20 6c 65 76 segments per lev
1610: 65 6c 20 2a 2f 0a 20 20 69 6e 74 20 6e 55 73 65 el */. int nUse
1620: 72 6d 65 72 67 65 3b 20 20 20 20 20 20 20 20 20 rmerge;
1630: 20 20 20 20 20 20 20 20 2f 2a 20 27 75 73 65 72 /* 'user
1640: 6d 65 72 67 65 27 20 73 65 74 74 69 6e 67 20 2a merge' setting *
1650: 2f 0a 20 20 69 6e 74 20 6e 48 61 73 68 53 69 7a /. int nHashSiz
1660: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 e;
1670: 20 20 20 20 2f 2a 20 42 79 74 65 73 20 6f 66 20 /* Bytes of
1680: 6d 65 6d 6f 72 79 20 66 6f 72 20 69 6e 2d 6d 65 memory for in-me
1690: 6d 6f 72 79 20 68 61 73 68 20 2a 2f 0a 20 20 63 mory hash */. c
16a0: 68 61 72 20 2a 7a 52 61 6e 6b 3b 20 20 20 20 20 har *zRank;
16b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
16c0: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 66 * Name of rank f
16d0: 75 6e 63 74 69 6f 6e 20 2a 2f 0a 20 20 63 68 61 unction */. cha
16e0: 72 20 2a 7a 52 61 6e 6b 41 72 67 73 3b 20 20 20 r *zRankArgs;
16f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
1700: 41 72 67 75 6d 65 6e 74 73 20 74 6f 20 72 61 6e Arguments to ran
1710: 6b 20 66 75 6e 63 74 69 6f 6e 20 2a 2f 0a 0a 20 k function */..
1720: 20 2f 2a 20 49 66 20 6e 6f 6e 2d 4e 55 4c 4c 2c /* If non-NULL,
1730: 20 70 6f 69 6e 74 73 20 74 6f 20 73 71 6c 69 74 points to sqlit
1740: 65 33 5f 76 74 61 62 2e 62 61 73 65 2e 7a 45 72 e3_vtab.base.zEr
1750: 72 6d 73 67 2e 20 4f 66 74 65 6e 20 4e 55 4c 4c rmsg. Often NULL
1760: 2e 20 2a 2f 0a 20 20 63 68 61 72 20 2a 2a 70 7a . */. char **pz
1770: 45 72 72 6d 73 67 3b 0a 0a 23 69 66 64 65 66 20 Errmsg;..#ifdef
1780: 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 20 20 69 SQLITE_DEBUG. i
1790: 6e 74 20 62 50 72 65 66 69 78 49 6e 64 65 78 3b nt bPrefixIndex;
17a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
17b0: 2a 20 54 72 75 65 20 74 6f 20 75 73 65 20 70 72 * True to use pr
17c0: 65 66 69 78 2d 69 6e 64 65 78 65 73 20 2a 2f 0a efix-indexes */.
17d0: 23 65 6e 64 69 66 0a 7d 3b 0a 0a 2f 2a 20 43 75 #endif.};../* Cu
17e0: 72 72 65 6e 74 20 65 78 70 65 63 74 65 64 20 76 rrent expected v
17f0: 61 6c 75 65 20 6f 66 20 25 5f 63 6f 6e 66 69 67 alue of %_config
1800: 20 74 61 62 6c 65 20 27 76 65 72 73 69 6f 6e 27 table 'version'
1810: 20 66 69 65 6c 64 20 2a 2f 0a 23 64 65 66 69 6e field */.#defin
1820: 65 20 46 54 53 35 5f 43 55 52 52 45 4e 54 5f 56 e FTS5_CURRENT_V
1830: 45 52 53 49 4f 4e 20 34 0a 0a 23 64 65 66 69 6e ERSION 4..#defin
1840: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e e FTS5_CONTENT_N
1850: 4f 52 4d 41 4c 20 20 20 30 0a 23 64 65 66 69 6e ORMAL 0.#defin
1860: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e e FTS5_CONTENT_N
1870: 4f 4e 45 20 20 20 20 20 31 0a 23 64 65 66 69 6e ONE 1.#defin
1880: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 45 e FTS5_CONTENT_E
1890: 58 54 45 52 4e 41 4c 20 32 0a 0a 23 64 65 66 69 XTERNAL 2..#defi
18a0: 6e 65 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 46 ne FTS5_DETAIL_F
18b0: 55 4c 4c 20 20 20 20 30 0a 23 64 65 66 69 6e 65 ULL 0.#define
18c0: 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 4e 4f 4e FTS5_DETAIL_NON
18d0: 45 20 20 20 20 31 0a 23 64 65 66 69 6e 65 20 46 E 1.#define F
18e0: 54 53 35 5f 44 45 54 41 49 4c 5f 43 4f 4c 55 4d TS5_DETAIL_COLUM
18f0: 4e 53 20 32 0a 0a 0a 0a 69 6e 74 20 73 71 6c 69 NS 2....int sqli
1900: 74 65 33 46 74 73 35 43 6f 6e 66 69 67 50 61 72 te3Fts5ConfigPar
1910: 73 65 28 0a 20 20 20 20 46 74 73 35 47 6c 6f 62 se(. Fts5Glob
1920: 61 6c 2a 2c 20 73 71 6c 69 74 65 33 2a 2c 20 69 al*, sqlite3*, i
1930: 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61 72 20 2a nt, const char *
1940: 2a 2c 20 46 74 73 35 43 6f 6e 66 69 67 2a 2a 2c *, Fts5Config**,
1950: 20 63 68 61 72 2a 2a 0a 29 3b 0a 76 6f 69 64 20 char**.);.void
1960: 73 71 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 sqlite3Fts5Confi
1970: 67 46 72 65 65 28 46 74 73 35 43 6f 6e 66 69 67 gFree(Fts5Config
1980: 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 *);..int sqlite3
1990: 46 74 73 35 43 6f 6e 66 69 67 44 65 63 6c 61 72 Fts5ConfigDeclar
19a0: 65 56 74 61 62 28 46 74 73 35 43 6f 6e 66 69 67 eVtab(Fts5Config
19b0: 20 2a 70 43 6f 6e 66 69 67 29 3b 0a 0a 69 6e 74 *pConfig);..int
19c0: 20 73 71 6c 69 74 65 33 46 74 73 35 54 6f 6b 65 sqlite3Fts5Toke
19d0: 6e 69 7a 65 28 0a 20 20 46 74 73 35 43 6f 6e 66 nize(. Fts5Conf
19e0: 69 67 20 2a 70 43 6f 6e 66 69 67 2c 20 20 20 20 ig *pConfig,
19f0: 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53 35 20 /* FTS5
1a00: 43 6f 6e 66 69 67 75 72 61 74 69 6f 6e 20 6f 62 Configuration ob
1a10: 6a 65 63 74 20 2a 2f 0a 20 20 69 6e 74 20 66 6c ject */. int fl
1a20: 61 67 73 2c 20 20 20 20 20 20 20 20 20 20 20 20 ags,
1a30: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53 /* FTS
1a40: 35 5f 54 4f 4b 45 4e 49 5a 45 5f 2a 20 66 6c 61 5_TOKENIZE_* fla
1a50: 67 73 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68 gs */. const ch
1a60: 61 72 20 2a 70 54 65 78 74 2c 20 69 6e 74 20 6e ar *pText, int n
1a70: 54 65 78 74 2c 20 20 20 2f 2a 20 54 65 78 74 20 Text, /* Text
1a80: 74 6f 20 74 6f 6b 65 6e 69 7a 65 20 2a 2f 0a 20 to tokenize */.
1a90: 20 76 6f 69 64 20 2a 70 43 74 78 2c 20 20 20 20 void *pCtx,
1aa0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
1ab0: 20 2f 2a 20 43 6f 6e 74 65 78 74 20 70 61 73 73 /* Context pass
1ac0: 65 64 20 74 6f 20 78 54 6f 6b 65 6e 28 29 20 2a ed to xToken() *
1ad0: 2f 0a 20 20 69 6e 74 20 28 2a 78 54 6f 6b 65 6e /. int (*xToken
1ae0: 29 28 76 6f 69 64 2a 2c 20 69 6e 74 2c 20 63 6f )(void*, int, co
1af0: 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20 nst char*, int,
1b00: 69 6e 74 2c 20 69 6e 74 29 20 20 20 20 2f 2a 20 int, int) /*
1b10: 43 61 6c 6c 62 61 63 6b 20 2a 2f 0a 29 3b 0a 0a Callback */.);..
1b20: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 void sqlite3Fts5
1b30: 44 65 71 75 6f 74 65 28 63 68 61 72 20 2a 7a 29 Dequote(char *z)
1b40: 3b 0a 0a 2f 2a 20 4c 6f 61 64 20 74 68 65 20 63 ;../* Load the c
1b50: 6f 6e 74 65 6e 74 73 20 6f 66 20 74 68 65 20 25 ontents of the %
1b60: 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 20 2a 2f _config table */
1b70: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 .int sqlite3Fts5
1b80: 43 6f 6e 66 69 67 4c 6f 61 64 28 46 74 73 35 43 ConfigLoad(Fts5C
1b90: 6f 6e 66 69 67 2a 2c 20 69 6e 74 29 3b 0a 0a 2f onfig*, int);../
1ba0: 2a 20 53 65 74 20 74 68 65 20 76 61 6c 75 65 20 * Set the value
1bb0: 6f 66 20 61 20 73 69 6e 67 6c 65 20 63 6f 6e 66 of a single conf
1bc0: 69 67 20 61 74 74 72 69 62 75 74 65 20 2a 2f 0a ig attribute */.
1bd0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 int sqlite3Fts5C
1be0: 6f 6e 66 69 67 53 65 74 56 61 6c 75 65 28 46 74 onfigSetValue(Ft
1bf0: 73 35 43 6f 6e 66 69 67 2a 2c 20 63 6f 6e 73 74 s5Config*, const
1c00: 20 63 68 61 72 2a 2c 20 73 71 6c 69 74 65 33 5f char*, sqlite3_
1c10: 76 61 6c 75 65 2a 2c 20 69 6e 74 2a 29 3b 0a 0a value*, int*);..
1c20: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 int sqlite3Fts5C
1c30: 6f 6e 66 69 67 50 61 72 73 65 52 61 6e 6b 28 63 onfigParseRank(c
1c40: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 63 68 61 72 onst char*, char
1c50: 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 0a 2f 2a **, char**);../*
1c60: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 .** End of inter
1c70: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 face to code in
1c80: 66 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 0a 2a fts5_config.c..*
1c90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1ca0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1cb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1cc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1cd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a *********/../***
1ce0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1cf0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1d00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1d10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
1d20: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 *******.** Inter
1d30: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 face to code in
1d40: 66 74 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a fts5_buffer.c..*
1d50: 2f 0a 0a 2f 2a 0a 2a 2a 20 42 75 66 66 65 72 20 /../*.** Buffer
1d60: 6f 62 6a 65 63 74 20 66 6f 72 20 74 68 65 20 69 object for the i
1d70: 6e 63 72 65 6d 65 6e 74 61 6c 20 62 75 69 6c 64 ncremental build
1d80: 69 6e 67 20 6f 66 20 73 74 72 69 6e 67 20 64 61 ing of string da
1d90: 74 61 2e 0a 2a 2f 0a 74 79 70 65 64 65 66 20 73 ta..*/.typedef s
1da0: 74 72 75 63 74 20 46 74 73 35 42 75 66 66 65 72 truct Fts5Buffer
1db0: 20 46 74 73 35 42 75 66 66 65 72 3b 0a 73 74 72 Fts5Buffer;.str
1dc0: 75 63 74 20 46 74 73 35 42 75 66 66 65 72 20 7b uct Fts5Buffer {
1dd0: 0a 20 20 75 38 20 2a 70 3b 0a 20 20 69 6e 74 20 . u8 *p;. int
1de0: 6e 3b 0a 20 20 69 6e 74 20 6e 53 70 61 63 65 3b n;. int nSpace;
1df0: 0a 7d 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 .};..int sqlite3
1e00: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 69 Fts5BufferSize(i
1e10: 6e 74 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a nt*, Fts5Buffer*
1e20: 2c 20 75 33 32 29 3b 0a 76 6f 69 64 20 73 71 6c , u32);.void sql
1e30: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70 ite3Fts5BufferAp
1e40: 70 65 6e 64 56 61 72 69 6e 74 28 69 6e 74 2a 2c pendVarint(int*,
1e50: 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 36 Fts5Buffer*, i6
1e60: 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 4);.void sqlite3
1e70: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 Fts5BufferAppend
1e80: 42 6c 6f 62 28 69 6e 74 2a 2c 20 46 74 73 35 42 Blob(int*, Fts5B
1e90: 75 66 66 65 72 2a 2c 20 75 33 32 2c 20 63 6f 6e uffer*, u32, con
1ea0: 73 74 20 75 38 2a 29 3b 0a 76 6f 69 64 20 73 71 st u8*);.void sq
1eb0: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 lite3Fts5BufferA
1ec0: 70 70 65 6e 64 53 74 72 69 6e 67 28 69 6e 74 20 ppendString(int
1ed0: 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 *, Fts5Buffer*,
1ee0: 63 6f 6e 73 74 20 63 68 61 72 2a 29 3b 0a 76 6f const char*);.vo
1ef0: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75 id sqlite3Fts5Bu
1f00: 66 66 65 72 46 72 65 65 28 46 74 73 35 42 75 66 fferFree(Fts5Buf
1f10: 66 65 72 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 fer*);.void sqli
1f20: 74 65 33 46 74 73 35 42 75 66 66 65 72 5a 65 72 te3Fts5BufferZer
1f30: 6f 28 46 74 73 35 42 75 66 66 65 72 2a 29 3b 0a o(Fts5Buffer*);.
1f40: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 void sqlite3Fts5
1f50: 42 75 66 66 65 72 53 65 74 28 69 6e 74 2a 2c 20 BufferSet(int*,
1f60: 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 6e 74 Fts5Buffer*, int
1f70: 2c 20 63 6f 6e 73 74 20 75 38 2a 29 3b 0a 76 6f , const u8*);.vo
1f80: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75 id sqlite3Fts5Bu
1f90: 66 66 65 72 41 70 70 65 6e 64 50 72 69 6e 74 66 fferAppendPrintf
1fa0: 28 69 6e 74 20 2a 2c 20 46 74 73 35 42 75 66 66 (int *, Fts5Buff
1fb0: 65 72 2a 2c 20 63 68 61 72 20 2a 7a 46 6d 74 2c er*, char *zFmt,
1fc0: 20 2e 2e 2e 29 3b 0a 0a 63 68 61 72 20 2a 73 71 ...);..char *sq
1fd0: 6c 69 74 65 33 46 74 73 35 4d 70 72 69 6e 74 66 lite3Fts5Mprintf
1fe0: 28 69 6e 74 20 2a 70 52 63 2c 20 63 6f 6e 73 74 (int *pRc, const
1ff0: 20 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e char *zFmt, ...
2000: 29 3b 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 35 );..#define fts5
2010: 42 75 66 66 65 72 5a 65 72 6f 28 78 29 20 20 20 BufferZero(x)
2020: 20 20 20 20 20 20 20 20 20 20 73 71 6c 69 74 65 sqlite
2030: 33 46 74 73 35 42 75 66 66 65 72 5a 65 72 6f 28 3Fts5BufferZero(
2040: 78 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 42 x).#define fts5B
2050: 75 66 66 65 72 41 70 70 65 6e 64 56 61 72 69 6e ufferAppendVarin
2060: 74 28 61 2c 62 2c 63 29 20 73 71 6c 69 74 65 33 t(a,b,c) sqlite3
2070: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 Fts5BufferAppend
2080: 56 61 72 69 6e 74 28 61 2c 62 2c 63 29 0a 23 64 Varint(a,b,c).#d
2090: 65 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 efine fts5Buffer
20a0: 46 72 65 65 28 61 29 20 20 20 20 20 20 20 20 20 Free(a)
20b0: 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42 sqlite3Fts5B
20c0: 75 66 66 65 72 46 72 65 65 28 61 29 0a 23 64 65 ufferFree(a).#de
20d0: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 41 fine fts5BufferA
20e0: 70 70 65 6e 64 42 6c 6f 62 28 61 2c 62 2c 63 2c ppendBlob(a,b,c,
20f0: 64 29 20 73 71 6c 69 74 65 33 46 74 73 35 42 75 d) sqlite3Fts5Bu
2100: 66 66 65 72 41 70 70 65 6e 64 42 6c 6f 62 28 61 fferAppendBlob(a
2110: 2c 62 2c 63 2c 64 29 0a 23 64 65 66 69 6e 65 20 ,b,c,d).#define
2120: 66 74 73 35 42 75 66 66 65 72 53 65 74 28 61 2c fts5BufferSet(a,
2130: 62 2c 63 2c 64 29 20 20 20 20 20 20 20 20 73 71 b,c,d) sq
2140: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 53 lite3Fts5BufferS
2150: 65 74 28 61 2c 62 2c 63 2c 64 29 0a 0a 23 64 65 et(a,b,c,d)..#de
2160: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 47 fine fts5BufferG
2170: 72 6f 77 28 70 52 63 2c 70 42 75 66 2c 6e 6e 29 row(pRc,pBuf,nn)
2180: 20 28 20 5c 0a 20 20 28 75 33 32 29 28 28 70 42 ( \. (u32)((pB
2190: 75 66 29 2d 3e 6e 29 20 2b 20 28 75 33 32 29 28 uf)->n) + (u32)(
21a0: 6e 6e 29 20 3c 3d 20 28 75 33 32 29 28 28 70 42 nn) <= (u32)((pB
21b0: 75 66 29 2d 3e 6e 53 70 61 63 65 29 20 3f 20 30 uf)->nSpace) ? 0
21c0: 20 3a 20 5c 0a 20 20 20 20 73 71 6c 69 74 65 33 : \. sqlite3
21d0: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 28 Fts5BufferSize((
21e0: 70 52 63 29 2c 28 70 42 75 66 29 2c 28 6e 6e 29 pRc),(pBuf),(nn)
21f0: 2b 28 70 42 75 66 29 2d 3e 6e 29 20 5c 0a 29 0a +(pBuf)->n) \.).
2200: 0a 2f 2a 20 57 72 69 74 65 20 61 6e 64 20 64 65 ./* Write and de
2210: 63 6f 64 65 20 62 69 67 2d 65 6e 64 69 61 6e 20 code big-endian
2220: 33 32 2d 62 69 74 20 69 6e 74 65 67 65 72 20 76 32-bit integer v
2230: 61 6c 75 65 73 20 2a 2f 0a 76 6f 69 64 20 73 71 alues */.void sq
2240: 6c 69 74 65 33 46 74 73 35 50 75 74 33 32 28 75 lite3Fts5Put32(u
2250: 38 2a 2c 20 69 6e 74 29 3b 0a 69 6e 74 20 73 71 8*, int);.int sq
2260: 6c 69 74 65 33 46 74 73 35 47 65 74 33 32 28 63 lite3Fts5Get32(c
2270: 6f 6e 73 74 20 75 38 2a 29 3b 0a 0a 23 64 65 66 onst u8*);..#def
2280: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 43 4f 4c ine FTS5_POS2COL
2290: 55 4d 4e 28 69 50 6f 73 29 20 28 69 6e 74 29 28 UMN(iPos) (int)(
22a0: 69 50 6f 73 20 3e 3e 20 33 32 29 0a 23 64 65 66 iPos >> 32).#def
22b0: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 4f 46 46 ine FTS5_POS2OFF
22c0: 53 45 54 28 69 50 6f 73 29 20 28 69 6e 74 29 28 SET(iPos) (int)(
22d0: 69 50 6f 73 20 26 20 30 78 46 46 46 46 46 46 46 iPos & 0xFFFFFFF
22e0: 46 29 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 F)..typedef stru
22f0: 63 74 20 46 74 73 35 50 6f 73 6c 69 73 74 52 65 ct Fts5PoslistRe
2300: 61 64 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74 ader Fts5Poslist
2310: 52 65 61 64 65 72 3b 0a 73 74 72 75 63 74 20 46 Reader;.struct F
2320: 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72 ts5PoslistReader
2330: 20 7b 0a 20 20 2f 2a 20 56 61 72 69 61 62 6c 65 {. /* Variable
2340: 73 20 75 73 65 64 20 6f 6e 6c 79 20 62 79 20 73 s used only by s
2350: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73 qlite3Fts5Poslis
2360: 74 49 74 65 72 58 58 58 28 29 20 66 75 6e 63 74 tIterXXX() funct
2370: 69 6f 6e 73 2e 20 2a 2f 0a 20 20 63 6f 6e 73 74 ions. */. const
2380: 20 75 38 20 2a 61 3b 20 20 20 20 20 20 20 20 20 u8 *a;
2390: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f /* Po
23a0: 73 69 74 69 6f 6e 20 6c 69 73 74 20 74 6f 20 69 sition list to i
23b0: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a terate through *
23c0: 2f 0a 20 20 69 6e 74 20 6e 3b 20 20 20 20 20 20 /. int n;
23d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
23e0: 20 20 20 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62 /* Size of b
23f0: 75 66 66 65 72 20 61 74 20 61 5b 5d 20 69 6e 20 uffer at a[] in
2400: 62 79 74 65 73 20 2a 2f 0a 20 20 69 6e 74 20 69 bytes */. int i
2410: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 ;
2420: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 75 /* Cu
2430: 72 72 65 6e 74 20 6f 66 66 73 65 74 20 69 6e 20 rrent offset in
2440: 61 5b 5d 20 2a 2f 0a 0a 20 20 75 38 20 62 46 6c a[] */.. u8 bFl
2450: 61 67 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 ag;
2460: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 6f 72 /* For
2470: 20 63 6c 69 65 6e 74 20 75 73 65 20 28 61 6e 79 client use (any
2480: 20 63 75 73 74 6f 6d 20 70 75 72 70 6f 73 65 29 custom purpose)
2490: 20 2a 2f 0a 0a 20 20 2f 2a 20 4f 75 74 70 75 74 */.. /* Output
24a0: 20 76 61 72 69 61 62 6c 65 73 20 2a 2f 0a 20 20 variables */.
24b0: 75 38 20 62 45 6f 66 3b 20 20 20 20 20 20 20 20 u8 bEof;
24c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
24d0: 2f 2a 20 53 65 74 20 74 6f 20 74 72 75 65 20 61 /* Set to true a
24e0: 74 20 45 4f 46 20 2a 2f 0a 20 20 69 36 34 20 69 t EOF */. i64 i
24f0: 50 6f 73 3b 20 20 20 20 20 20 20 20 20 20 20 20 Pos;
2500: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 28 69 /* (i
2510: 43 6f 6c 3c 3c 33 32 29 20 2b 20 69 50 6f 73 20 Col<<32) + iPos
2520: 2a 2f 0a 7d 3b 0a 69 6e 74 20 73 71 6c 69 74 65 */.};.int sqlite
2530: 33 46 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 3Fts5PoslistRead
2540: 65 72 49 6e 69 74 28 0a 20 20 63 6f 6e 73 74 20 erInit(. const
2550: 75 38 20 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20 u8 *a, int n,
2560: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73 /* Pos
2570: 6c 69 73 74 20 62 75 66 66 65 72 20 74 6f 20 69 list buffer to i
2580: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a terate through *
2590: 2f 0a 20 20 46 74 73 35 50 6f 73 6c 69 73 74 52 /. Fts5PoslistR
25a0: 65 61 64 65 72 20 2a 70 49 74 65 72 20 20 20 20 eader *pIter
25b0: 20 20 20 20 2f 2a 20 49 74 65 72 61 74 6f 72 20 /* Iterator
25c0: 6f 62 6a 65 63 74 20 74 6f 20 69 6e 69 74 69 61 object to initia
25d0: 6c 69 7a 65 20 2a 2f 0a 29 3b 0a 69 6e 74 20 73 lize */.);.int s
25e0: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73 qlite3Fts5Poslis
25f0: 74 52 65 61 64 65 72 4e 65 78 74 28 46 74 73 35 tReaderNext(Fts5
2600: 50 6f 73 6c 69 73 74 52 65 61 64 65 72 2a 29 3b PoslistReader*);
2610: 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 ..typedef struct
2620: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74 Fts5PoslistWrit
2630: 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 er Fts5PoslistWr
2640: 69 74 65 72 3b 0a 73 74 72 75 63 74 20 46 74 73 iter;.struct Fts
2650: 35 50 6f 73 6c 69 73 74 57 72 69 74 65 72 20 7b 5PoslistWriter {
2660: 0a 20 20 69 36 34 20 69 50 72 65 76 3b 0a 7d 3b . i64 iPrev;.};
2670: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 .int sqlite3Fts5
2680: 50 6f 73 6c 69 73 74 57 72 69 74 65 72 41 70 70 PoslistWriterApp
2690: 65 6e 64 28 46 74 73 35 42 75 66 66 65 72 2a 2c end(Fts5Buffer*,
26a0: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74 Fts5PoslistWrit
26b0: 65 72 2a 2c 20 69 36 34 29 3b 0a 76 6f 69 64 20 er*, i64);.void
26c0: 73 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 sqlite3Fts5Posli
26d0: 73 74 53 61 66 65 41 70 70 65 6e 64 28 46 74 73 stSafeAppend(Fts
26e0: 35 42 75 66 66 65 72 2a 2c 20 69 36 34 2a 2c 20 5Buffer*, i64*,
26f0: 69 36 34 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 i64);..int sqlit
2700: 65 33 46 74 73 35 50 6f 73 6c 69 73 74 4e 65 78 e3Fts5PoslistNex
2710: 74 36 34 28 0a 20 20 63 6f 6e 73 74 20 75 38 20 t64(. const u8
2720: 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20 20 20 20 *a, int n,
2730: 20 20 20 20 20 20 20 2f 2a 20 42 75 66 66 65 72 /* Buffer
2740: 20 63 6f 6e 74 61 69 6e 69 6e 67 20 70 6f 73 6c containing posl
2750: 69 73 74 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 69 ist */. int *pi
2760: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 ,
2770: 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e 2f 4f /* IN/O
2780: 55 54 3a 20 4f 66 66 73 65 74 20 77 69 74 68 69 UT: Offset withi
2790: 6e 20 61 5b 5d 20 2a 2f 0a 20 20 69 36 34 20 2a n a[] */. i64 *
27a0: 70 69 4f 66 66 20 20 20 20 20 20 20 20 20 20 20 piOff
27b0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e /* IN
27c0: 2f 4f 55 54 3a 20 43 75 72 72 65 6e 74 20 6f 66 /OUT: Current of
27d0: 66 73 65 74 20 2a 2f 0a 29 3b 0a 0a 2f 2a 20 4d fset */.);../* M
27e0: 61 6c 6c 6f 63 20 75 74 69 6c 69 74 79 20 2a 2f alloc utility */
27f0: 0a 76 6f 69 64 20 2a 73 71 6c 69 74 65 33 46 74 .void *sqlite3Ft
2800: 73 35 4d 61 6c 6c 6f 63 5a 65 72 6f 28 69 6e 74 s5MallocZero(int
2810: 20 2a 70 52 63 2c 20 69 6e 74 20 6e 42 79 74 65 *pRc, int nByte
2820: 29 3b 0a 63 68 61 72 20 2a 73 71 6c 69 74 65 33 );.char *sqlite3
2830: 46 74 73 35 53 74 72 6e 64 75 70 28 69 6e 74 20 Fts5Strndup(int
2840: 2a 70 52 63 2c 20 63 6f 6e 73 74 20 63 68 61 72 *pRc, const char
2850: 20 2a 70 49 6e 2c 20 69 6e 74 20 6e 49 6e 29 3b *pIn, int nIn);
2860: 0a 0a 2f 2a 20 43 68 61 72 61 63 74 65 72 20 73 ../* Character s
2870: 65 74 20 74 65 73 74 73 20 28 6c 69 6b 65 20 69 et tests (like i
2880: 73 73 70 61 63 65 28 29 2c 20 69 73 61 6c 70 68 sspace(), isalph
2890: 61 28 29 20 65 74 63 2e 29 20 2a 2f 0a 69 6e 74 a() etc.) */.int
28a0: 20 73 71 6c 69 74 65 33 46 74 73 35 49 73 42 61 sqlite3Fts5IsBa
28b0: 72 65 77 6f 72 64 28 63 68 61 72 20 74 29 3b 0a reword(char t);.
28c0: 0a 0a 2f 2a 20 42 75 63 6b 65 74 20 6f 66 20 74 ../* Bucket of t
28d0: 65 72 6d 73 20 6f 62 6a 65 63 74 20 75 73 65 64 erms object used
28e0: 20 62 79 20 74 68 65 20 69 6e 74 65 67 72 69 74 by the integrit
28f0: 79 2d 63 68 65 63 6b 20 69 6e 20 6f 66 66 73 65 y-check in offse
2900: 74 73 3d 30 20 6d 6f 64 65 2e 20 2a 2f 0a 74 79 ts=0 mode. */.ty
2910: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 pedef struct Fts
2920: 35 54 65 72 6d 73 65 74 20 46 74 73 35 54 65 72 5Termset Fts5Ter
2930: 6d 73 65 74 3b 0a 69 6e 74 20 73 71 6c 69 74 65 mset;.int sqlite
2940: 33 46 74 73 35 54 65 72 6d 73 65 74 4e 65 77 28 3Fts5TermsetNew(
2950: 46 74 73 35 54 65 72 6d 73 65 74 2a 2a 29 3b 0a Fts5Termset**);.
2960: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 54 int sqlite3Fts5T
2970: 65 72 6d 73 65 74 41 64 64 28 46 74 73 35 54 65 ermsetAdd(Fts5Te
2980: 72 6d 73 65 74 2a 2c 20 69 6e 74 2c 20 63 6f 6e rmset*, int, con
2990: 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20 69 st char*, int, i
29a0: 6e 74 20 2a 70 62 50 72 65 73 65 6e 74 29 3b 0a nt *pbPresent);.
29b0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 void sqlite3Fts5
29c0: 54 65 72 6d 73 65 74 46 72 65 65 28 46 74 73 35 TermsetFree(Fts5
29d0: 54 65 72 6d 73 65 74 2a 29 3b 0a 0a 2f 2a 0a 2a Termset*);../*.*
29e0: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 * End of interfa
29f0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 ce to code in ft
2a00: 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a 2a 2a s5_buffer.c..***
2a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a50: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a *******/../*****
2a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
2aa0: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 *****.** Interfa
2ab0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 ce to code in ft
2ac0: 73 35 5f 69 6e 64 65 78 2e 63 2e 20 66 74 73 35 s5_index.c. fts5
2ad0: 5f 69 6e 64 65 78 2e 63 20 63 6f 6e 74 61 69 6e _index.c contain
2ae0: 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 0a s contains code.
2af0: 2a 2a 20 74 6f 20 61 63 63 65 73 73 20 74 68 65 ** to access the
2b00: 20 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20 data stored in
2b10: 74 68 65 20 25 5f 64 61 74 61 20 74 61 62 6c 65 the %_data table
2b20: 2e 0a 2a 2f 0a 0a 74 79 70 65 64 65 66 20 73 74 ..*/..typedef st
2b30: 72 75 63 74 20 46 74 73 35 49 6e 64 65 78 20 46 ruct Fts5Index F
2b40: 74 73 35 49 6e 64 65 78 3b 0a 74 79 70 65 64 65 ts5Index;.typede
2b50: 66 20 73 74 72 75 63 74 20 46 74 73 35 49 6e 64 f struct Fts5Ind
2b60: 65 78 49 74 65 72 20 46 74 73 35 49 6e 64 65 78 exIter Fts5Index
2b70: 49 74 65 72 3b 0a 0a 73 74 72 75 63 74 20 46 74 Iter;..struct Ft
2b80: 73 35 49 6e 64 65 78 49 74 65 72 20 7b 0a 20 20 s5IndexIter {.
2b90: 69 36 34 20 69 52 6f 77 69 64 3b 0a 20 20 63 6f i64 iRowid;. co
2ba0: 6e 73 74 20 75 38 20 2a 70 44 61 74 61 3b 0a 20 nst u8 *pData;.
2bb0: 20 69 6e 74 20 6e 44 61 74 61 3b 0a 20 20 75 38 int nData;. u8
2bc0: 20 62 45 6f 66 3b 0a 7d 3b 0a 0a 23 64 65 66 69 bEof;.};..#defi
2bd0: 6e 65 20 73 71 6c 69 74 65 33 46 74 73 35 49 74 ne sqlite3Fts5It
2be0: 65 72 45 6f 66 28 78 29 20 28 28 78 29 2d 3e 62 erEof(x) ((x)->b
2bf0: 45 6f 66 29 0a 0a 2f 2a 0a 2a 2a 20 56 61 6c 75 Eof)../*.** Valu
2c00: 65 73 20 75 73 65 64 20 61 73 20 70 61 72 74 20 es used as part
2c10: 6f 66 20 74 68 65 20 66 6c 61 67 73 20 61 72 67 of the flags arg
2c20: 75 6d 65 6e 74 20 70 61 73 73 65 64 20 74 6f 20 ument passed to
2c30: 49 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f IndexQuery()..*/
2c40: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44 .#define FTS5IND
2c50: 45 58 5f 51 55 45 52 59 5f 50 52 45 46 49 58 20 EX_QUERY_PREFIX
2c60: 20 20 20 20 30 78 30 30 30 31 20 20 20 2f 2a 20 0x0001 /*
2c70: 50 72 65 66 69 78 20 71 75 65 72 79 20 2a 2f 0a Prefix query */.
2c80: 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44 45 #define FTS5INDE
2c90: 58 5f 51 55 45 52 59 5f 44 45 53 43 20 20 20 20 X_QUERY_DESC
2ca0: 20 20 20 30 78 30 30 30 32 20 20 20 2f 2a 20 44 0x0002 /* D
2cb0: 6f 63 73 20 69 6e 20 64 65 73 63 65 6e 64 69 6e ocs in descendin
2cc0: 67 20 72 6f 77 69 64 20 6f 72 64 65 72 20 2a 2f g rowid order */
2cd0: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44 .#define FTS5IND
2ce0: 45 58 5f 51 55 45 52 59 5f 53 43 41 4e 20 20 20 EX_QUERY_SCAN
2cf0: 20 20 20 20 30 78 30 30 30 38 20 20 20 2f 2a 20 0x0008 /*
2d00: 53 63 61 6e 20 71 75 65 72 79 20 28 66 74 73 35 Scan query (fts5
2d10: 76 6f 63 61 62 29 20 2a 2f 0a 0a 2f 2a 20 54 68 vocab) */../* Th
2d20: 65 20 66 6f 6c 6c 6f 77 69 6e 67 20 61 72 65 20 e following are
2d30: 75 73 65 64 20 69 6e 74 65 72 6e 61 6c 6c 79 20 used internally
2d40: 62 79 20 74 68 65 20 66 74 73 35 5f 69 6e 64 65 by the fts5_inde
2d50: 78 2e 63 20 6d 6f 64 75 6c 65 2e 20 54 68 65 79 x.c module. They
2d60: 20 61 72 65 0a 2a 2a 20 64 65 66 69 6e 65 64 20 are.** defined
2d70: 68 65 72 65 20 6f 6e 6c 79 20 74 6f 20 6d 61 6b here only to mak
2d80: 65 20 69 74 20 65 61 73 69 65 72 20 74 6f 20 61 e it easier to a
2d90: 76 6f 69 64 20 63 6c 61 73 68 65 73 20 77 69 74 void clashes wit
2da0: 68 20 74 68 65 20 66 6c 61 67 73 0a 2a 2a 20 61 h the flags.** a
2db0: 62 6f 76 65 2e 20 2a 2f 0a 23 64 65 66 69 6e 65 bove. */.#define
2dc0: 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45 52 59 FTS5INDEX_QUERY
2dd0: 5f 53 4b 49 50 45 4d 50 54 59 20 20 30 78 30 30 _SKIPEMPTY 0x00
2de0: 31 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 10.#define FTS5I
2df0: 4e 44 45 58 5f 51 55 45 52 59 5f 4e 4f 4f 55 54 NDEX_QUERY_NOOUT
2e00: 50 55 54 20 20 20 30 78 30 30 32 30 0a 0a 2f 2a PUT 0x0020../*
2e10: 0a 2a 2a 20 43 72 65 61 74 65 2f 64 65 73 74 72 .** Create/destr
2e20: 6f 79 20 61 6e 20 46 74 73 35 49 6e 64 65 78 20 oy an Fts5Index
2e30: 6f 62 6a 65 63 74 2e 0a 2a 2f 0a 69 6e 74 20 73 object..*/.int s
2e40: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4f qlite3Fts5IndexO
2e50: 70 65 6e 28 46 74 73 35 43 6f 6e 66 69 67 20 2a pen(Fts5Config *
2e60: 70 43 6f 6e 66 69 67 2c 20 69 6e 74 20 62 43 72 pConfig, int bCr
2e70: 65 61 74 65 2c 20 46 74 73 35 49 6e 64 65 78 2a eate, Fts5Index*
2e80: 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 69 6e 74 20 *, char**);.int
2e90: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 sqlite3Fts5Index
2ea0: 43 6c 6f 73 65 28 46 74 73 35 49 6e 64 65 78 20 Close(Fts5Index
2eb0: 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20 52 65 74 75 *p);../*.** Retu
2ec0: 72 6e 20 61 20 73 69 6d 70 6c 65 20 63 68 65 63 rn a simple chec
2ed0: 6b 73 75 6d 20 76 61 6c 75 65 20 62 61 73 65 64 ksum value based
2ee0: 20 6f 6e 20 74 68 65 20 61 72 67 75 6d 65 6e 74 on the argument
2ef0: 73 2e 0a 2a 2f 0a 75 36 34 20 73 71 6c 69 74 65 s..*/.u64 sqlite
2f00: 33 46 74 73 35 49 6e 64 65 78 45 6e 74 72 79 43 3Fts5IndexEntryC
2f10: 6b 73 75 6d 28 0a 20 20 69 36 34 20 69 52 6f 77 ksum(. i64 iRow
2f20: 69 64 2c 20 0a 20 20 69 6e 74 20 69 43 6f 6c 2c id, . int iCol,
2f30: 20 0a 20 20 69 6e 74 20 69 50 6f 73 2c 20 0a 20 . int iPos, .
2f40: 20 69 6e 74 20 69 49 64 78 2c 0a 20 20 63 6f 6e int iIdx,. con
2f50: 73 74 20 63 68 61 72 20 2a 70 54 65 72 6d 2c 0a st char *pTerm,.
2f60: 20 20 69 6e 74 20 6e 54 65 72 6d 0a 29 3b 0a 0a int nTerm.);..
2f70: 2f 2a 0a 2a 2a 20 41 72 67 75 6d 65 6e 74 20 70 /*.** Argument p
2f80: 20 70 6f 69 6e 74 73 20 74 6f 20 61 20 62 75 66 points to a buf
2f90: 66 65 72 20 63 6f 6e 74 61 69 6e 69 6e 67 20 75 fer containing u
2fa0: 74 66 2d 38 20 74 65 78 74 20 74 68 61 74 20 69 tf-8 text that i
2fb0: 73 20 6e 20 62 79 74 65 73 20 69 6e 20 0a 2a 2a s n bytes in .**
2fc0: 20 73 69 7a 65 2e 20 52 65 74 75 72 6e 20 74 68 size. Return th
2fd0: 65 20 6e 75 6d 62 65 72 20 6f 66 20 62 79 74 65 e number of byte
2fe0: 73 20 69 6e 20 74 68 65 20 6e 43 68 61 72 20 63 s in the nChar c
2ff0: 68 61 72 61 63 74 65 72 20 70 72 65 66 69 78 20 haracter prefix
3000: 6f 66 20 74 68 65 0a 2a 2a 20 62 75 66 66 65 72 of the.** buffer
3010: 2c 20 6f 72 20 30 20 69 66 20 74 68 65 72 65 20 , or 0 if there
3020: 61 72 65 20 6c 65 73 73 20 74 68 61 6e 20 6e 43 are less than nC
3030: 68 61 72 20 63 68 61 72 61 63 74 65 72 73 20 69 har characters i
3040: 6e 20 74 6f 74 61 6c 2e 0a 2a 2f 0a 69 6e 74 20 n total..*/.int
3050: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 sqlite3Fts5Index
3060: 43 68 61 72 6c 65 6e 54 6f 42 79 74 65 6c 65 6e CharlenToBytelen
3070: 28 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a (. const char *
3080: 70 2c 20 0a 20 20 69 6e 74 20 6e 42 79 74 65 2c p, . int nByte,
3090: 20 0a 20 20 69 6e 74 20 6e 43 68 61 72 0a 29 3b . int nChar.);
30a0: 0a 0a 2f 2a 0a 2a 2a 20 4f 70 65 6e 20 61 20 6e ../*.** Open a n
30b0: 65 77 20 69 74 65 72 61 74 6f 72 20 74 6f 20 69 ew iterator to i
30c0: 74 65 72 61 74 65 20 74 68 6f 75 67 68 20 61 6c terate though al
30d0: 6c 20 72 6f 77 69 64 73 20 74 68 61 74 20 6d 61 l rowids that ma
30e0: 74 63 68 20 74 68 65 20 0a 2a 2a 20 73 70 65 63 tch the .** spec
30f0: 69 66 69 65 64 20 74 6f 6b 65 6e 20 6f 72 20 74 ified token or t
3100: 6f 6b 65 6e 20 70 72 65 66 69 78 2e 0a 2a 2f 0a oken prefix..*/.
3110: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 int sqlite3Fts5I
3120: 6e 64 65 78 51 75 65 72 79 28 0a 20 20 46 74 73 ndexQuery(. Fts
3130: 35 49 6e 64 65 78 20 2a 70 2c 20 20 20 20 20 20 5Index *p,
3140: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
3150: 46 54 53 20 69 6e 64 65 78 20 74 6f 20 71 75 65 FTS index to que
3160: 72 79 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68 ry */. const ch
3170: 61 72 20 2a 70 54 6f 6b 65 6e 2c 20 69 6e 74 20 ar *pToken, int
3180: 6e 54 6f 6b 65 6e 2c 20 2f 2a 20 54 6f 6b 65 6e nToken, /* Token
3190: 20 28 6f 72 20 70 72 65 66 69 78 29 20 74 6f 20 (or prefix) to
31a0: 71 75 65 72 79 20 66 6f 72 20 2a 2f 0a 20 20 69 query for */. i
31b0: 6e 74 20 66 6c 61 67 73 2c 20 20 20 20 20 20 20 nt flags,
31c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
31d0: 2a 20 4d 61 73 6b 20 6f 66 20 46 54 53 35 49 4e * Mask of FTS5IN
31e0: 44 45 58 5f 51 55 45 52 59 5f 58 20 66 6c 61 67 DEX_QUERY_X flag
31f0: 73 20 2a 2f 0a 20 20 46 74 73 35 43 6f 6c 73 65 s */. Fts5Colse
3200: 74 20 2a 70 43 6f 6c 73 65 74 2c 20 20 20 20 20 t *pColset,
3210: 20 20 20 20 20 20 20 2f 2a 20 4d 61 74 63 68 20 /* Match
3220: 74 68 65 73 65 20 63 6f 6c 75 6d 6e 73 20 6f 6e these columns on
3230: 6c 79 20 2a 2f 0a 20 20 46 74 73 35 49 6e 64 65 ly */. Fts5Inde
3240: 78 49 74 65 72 20 2a 2a 70 70 49 74 65 72 20 20 xIter **ppIter
3250: 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 /* OUT:
3260: 4e 65 77 20 69 74 65 72 61 74 6f 72 20 6f 62 6a New iterator obj
3270: 65 63 74 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a ect */.);../*.**
3280: 20 54 68 65 20 76 61 72 69 6f 75 73 20 6f 70 65 The various ope
3290: 72 61 74 69 6f 6e 73 20 6f 6e 20 6f 70 65 6e 20 rations on open
32a0: 74 6f 6b 65 6e 20 6f 72 20 74 6f 6b 65 6e 20 70 token or token p
32b0: 72 65 66 69 78 20 69 74 65 72 61 74 6f 72 73 20 refix iterators
32c0: 6f 70 65 6e 65 64 0a 2a 2a 20 75 73 69 6e 67 20 opened.** using
32d0: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 sqlite3Fts5Index
32e0: 51 75 65 72 79 28 29 2e 0a 2a 2f 0a 69 6e 74 20 Query()..*/.int
32f0: 73 71 6c 69 74 65 33 46 74 73 35 49 74 65 72 4e sqlite3Fts5IterN
3300: 65 78 74 28 46 74 73 35 49 6e 64 65 78 49 74 65 ext(Fts5IndexIte
3310: 72 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 r*);.int sqlite3
3320: 46 74 73 35 49 74 65 72 4e 65 78 74 46 72 6f 6d Fts5IterNextFrom
3330: 28 46 74 73 35 49 6e 64 65 78 49 74 65 72 2a 2c (Fts5IndexIter*,
3340: 20 69 36 34 20 69 4d 61 74 63 68 29 3b 0a 0a 2f i64 iMatch);../
3350: 2a 0a 2a 2a 20 43 6c 6f 73 65 20 61 6e 20 69 74 *.** Close an it
3360: 65 72 61 74 6f 72 20 6f 70 65 6e 65 64 20 62 79 erator opened by
3370: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 sqlite3Fts5Inde
3380: 78 51 75 65 72 79 28 29 2e 0a 2a 2f 0a 76 6f 69 xQuery()..*/.voi
3390: 64 20 73 71 6c 69 74 65 33 46 74 73 35 49 74 65 d sqlite3Fts5Ite
33a0: 72 43 6c 6f 73 65 28 46 74 73 35 49 6e 64 65 78 rClose(Fts5Index
33b0: 49 74 65 72 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 54 Iter*);../*.** T
33c0: 68 69 73 20 69 6e 74 65 72 66 61 63 65 20 69 73 his interface is
33d0: 20 75 73 65 64 20 62 79 20 74 68 65 20 66 74 73 used by the fts
33e0: 35 76 6f 63 61 62 20 6d 6f 64 75 6c 65 2e 0a 2a 5vocab module..*
33f0: 2f 0a 63 6f 6e 73 74 20 63 68 61 72 20 2a 73 71 /.const char *sq
3400: 6c 69 74 65 33 46 74 73 35 49 74 65 72 54 65 72 lite3Fts5IterTer
3410: 6d 28 46 74 73 35 49 6e 64 65 78 49 74 65 72 2a m(Fts5IndexIter*
3420: 2c 20 69 6e 74 2a 29 3b 0a 69 6e 74 20 73 71 6c , int*);.int sql
3430: 69 74 65 33 46 74 73 35 49 74 65 72 4e 65 78 74 ite3Fts5IterNext
3440: 53 63 61 6e 28 46 74 73 35 49 6e 64 65 78 49 74 Scan(Fts5IndexIt
3450: 65 72 2a 29 3b 0a 0a 0a 2f 2a 0a 2a 2a 20 49 6e er*);.../*.** In
3460: 73 65 72 74 20 6f 72 20 72 65 6d 6f 76 65 20 64 sert or remove d
3470: 61 74 61 20 74 6f 20 6f 72 20 66 72 6f 6d 20 74 ata to or from t
3480: 68 65 20 69 6e 64 65 78 2e 20 45 61 63 68 20 74 he index. Each t
3490: 69 6d 65 20 61 20 64 6f 63 75 6d 65 6e 74 20 69 ime a document i
34a0: 73 20 0a 2a 2a 20 61 64 64 65 64 20 74 6f 20 6f s .** added to o
34b0: 72 20 72 65 6d 6f 76 65 64 20 66 72 6f 6d 20 74 r removed from t
34c0: 68 65 20 69 6e 64 65 78 2c 20 74 68 69 73 20 66 he index, this f
34d0: 75 6e 63 74 69 6f 6e 20 69 73 20 63 61 6c 6c 65 unction is calle
34e0: 64 20 6f 6e 65 20 6f 72 20 6d 6f 72 65 0a 2a 2a d one or more.**
34f0: 20 74 69 6d 65 73 2e 0a 2a 2a 0a 2a 2a 20 46 6f times..**.** Fo
3500: 72 20 61 6e 20 69 6e 73 65 72 74 2c 20 69 74 20 r an insert, it
3510: 6d 75 73 74 20 62 65 20 63 61 6c 6c 65 64 20 6f must be called o
3520: 6e 63 65 20 66 6f 72 20 65 61 63 68 20 74 6f 6b nce for each tok
3530: 65 6e 20 69 6e 20 74 68 65 20 6e 65 77 20 64 6f en in the new do
3540: 63 75 6d 65 6e 74 2e 0a 2a 2a 20 49 66 20 74 68 cument..** If th
3550: 65 20 6f 70 65 72 61 74 69 6f 6e 20 69 73 20 61 e operation is a
3560: 20 64 65 6c 65 74 65 2c 20 69 74 20 6d 75 73 74 delete, it must
3570: 20 62 65 20 63 61 6c 6c 65 64 20 28 61 74 20 6c be called (at l
3580: 65 61 73 74 29 20 6f 6e 63 65 20 66 6f 72 20 65 east) once for e
3590: 61 63 68 0a 2a 2a 20 75 6e 69 71 75 65 20 74 6f ach.** unique to
35a0: 6b 65 6e 20 69 6e 20 74 68 65 20 64 6f 63 75 6d ken in the docum
35b0: 65 6e 74 20 77 69 74 68 20 61 6e 20 69 43 6f 6c ent with an iCol
35c0: 20 76 61 6c 75 65 20 6c 65 73 73 20 74 68 61 6e value less than
35d0: 20 7a 65 72 6f 2e 20 54 68 65 20 69 50 6f 73 0a zero. The iPos.
35e0: 2a 2a 20 61 72 67 75 6d 65 6e 74 20 69 73 20 69 ** argument is i
35f0: 67 6e 6f 72 65 64 20 66 6f 72 20 61 20 64 65 6c gnored for a del
3600: 65 74 65 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 ete..*/.int sqli
3610: 74 65 33 46 74 73 35 49 6e 64 65 78 57 72 69 74 te3Fts5IndexWrit
3620: 65 28 0a 20 20 46 74 73 35 49 6e 64 65 78 20 2a e(. Fts5Index *
3630: 70 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 p,
3640: 20 20 20 20 20 2f 2a 20 49 6e 64 65 78 20 74 6f /* Index to
3650: 20 77 72 69 74 65 20 74 6f 20 2a 2f 0a 20 20 69 write to */. i
3660: 6e 74 20 69 43 6f 6c 2c 20 20 20 20 20 20 20 20 nt iCol,
3670: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
3680: 2a 20 43 6f 6c 75 6d 6e 20 74 6f 6b 65 6e 20 61 * Column token a
3690: 70 70 65 61 72 73 20 69 6e 20 28 2d 76 65 20 2d ppears in (-ve -
36a0: 3e 20 64 65 6c 65 74 65 29 20 2a 2f 0a 20 20 69 > delete) */. i
36b0: 6e 74 20 69 50 6f 73 2c 20 20 20 20 20 20 20 20 nt iPos,
36c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
36d0: 2a 20 50 6f 73 69 74 69 6f 6e 20 6f 66 20 74 6f * Position of to
36e0: 6b 65 6e 20 77 69 74 68 69 6e 20 63 6f 6c 75 6d ken within colum
36f0: 6e 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61 n */. const cha
3700: 72 20 2a 70 54 6f 6b 65 6e 2c 20 69 6e 74 20 6e r *pToken, int n
3710: 54 6f 6b 65 6e 20 20 2f 2a 20 54 6f 6b 65 6e 20 Token /* Token
3720: 74 6f 20 61 64 64 20 6f 72 20 72 65 6d 6f 76 65 to add or remove
3730: 20 74 6f 20 6f 72 20 66 72 6f 6d 20 69 6e 64 65 to or from inde
3740: 78 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 49 x */.);../*.** I
3750: 6e 64 69 63 61 74 65 20 74 68 61 74 20 73 75 62 ndicate that sub
3760: 73 65 71 75 65 6e 74 20 63 61 6c 6c 73 20 74 6f sequent calls to
3770: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 sqlite3Fts5Inde
3780: 78 57 72 69 74 65 28 29 20 70 65 72 74 61 69 6e xWrite() pertain
3790: 20 74 6f 0a 2a 2a 20 64 6f 63 75 6d 65 6e 74 20 to.** document
37a0: 69 44 6f 63 69 64 2e 0a 2a 2f 0a 69 6e 74 20 73 iDocid..*/.int s
37b0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 42 qlite3Fts5IndexB
37c0: 65 67 69 6e 57 72 69 74 65 28 0a 20 20 46 74 73 eginWrite(. Fts
37d0: 35 49 6e 64 65 78 20 2a 70 2c 20 20 20 20 20 20 5Index *p,
37e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 /*
37f0: 49 6e 64 65 78 20 74 6f 20 77 72 69 74 65 20 74 Index to write t
3800: 6f 20 2a 2f 0a 20 20 69 6e 74 20 62 44 65 6c 65 o */. int bDele
3810: 74 65 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 te,
3820: 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65 20 69 /* True i
3830: 66 20 63 75 72 72 65 6e 74 20 6f 70 65 72 61 74 f current operat
3840: 69 6f 6e 20 69 73 20 61 20 64 65 6c 65 74 65 20 ion is a delete
3850: 2a 2f 0a 20 20 69 36 34 20 69 44 6f 63 69 64 20 */. i64 iDocid
3860: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
3870: 20 20 20 20 20 2f 2a 20 44 6f 63 69 64 20 74 6f /* Docid to
3880: 20 61 64 64 20 6f 72 20 72 65 6d 6f 76 65 20 64 add or remove d
3890: 61 74 61 20 66 72 6f 6d 20 2a 2f 0a 29 3b 0a 0a ata from */.);..
38a0: 2f 2a 0a 2a 2a 20 46 6c 75 73 68 20 61 6e 79 20 /*.** Flush any
38b0: 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20 74 data stored in t
38c0: 68 65 20 69 6e 2d 6d 65 6d 6f 72 79 20 68 61 73 he in-memory has
38d0: 68 20 74 61 62 6c 65 73 20 74 6f 20 74 68 65 20 h tables to the
38e0: 64 61 74 61 62 61 73 65 2e 0a 2a 2a 20 49 66 20 database..** If
38f0: 74 68 65 20 62 43 6f 6d 6d 69 74 20 66 6c 61 67 the bCommit flag
3900: 20 69 73 20 74 72 75 65 2c 20 61 6c 73 6f 20 63 is true, also c
3910: 6c 6f 73 65 20 61 6e 79 20 6f 70 65 6e 20 62 6c lose any open bl
3920: 6f 62 20 68 61 6e 64 6c 65 73 2e 0a 2a 2f 0a 69 ob handles..*/.i
3930: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e nt sqlite3Fts5In
3940: 64 65 78 53 79 6e 63 28 46 74 73 35 49 6e 64 65 dexSync(Fts5Inde
3950: 78 20 2a 70 2c 20 69 6e 74 20 62 43 6f 6d 6d 69 x *p, int bCommi
3960: 74 29 3b 0a 0a 2f 2a 0a 2a 2a 20 44 69 73 63 61 t);../*.** Disca
3970: 72 64 20 61 6e 79 20 64 61 74 61 20 73 74 6f 72 rd any data stor
3980: 65 64 20 69 6e 20 74 68 65 20 69 6e 2d 6d 65 6d ed in the in-mem
3990: 6f 72 79 20 68 61 73 68 20 74 61 62 6c 65 73 2e ory hash tables.
39a0: 20 44 6f 20 6e 6f 74 20 77 72 69 74 65 20 69 74 Do not write it
39b0: 0a 2a 2a 20 74 6f 20 74 68 65 20 64 61 74 61 62 .** to the datab
39c0: 61 73 65 2e 20 41 64 64 69 74 69 6f 6e 61 6c 6c ase. Additionall
39d0: 79 2c 20 61 73 73 75 6d 65 20 74 68 61 74 20 74 y, assume that t
39e0: 68 65 20 63 6f 6e 74 65 6e 74 73 20 6f 66 20 74 he contents of t
39f0: 68 65 20 25 5f 64 61 74 61 0a 2a 2a 20 74 61 62 he %_data.** tab
3a00: 6c 65 20 6d 61 79 20 68 61 76 65 20 63 68 61 6e le may have chan
3a10: 67 65 64 20 6f 6e 20 64 69 73 6b 2e 20 53 6f 20 ged on disk. So
3a20: 61 6e 79 20 69 6e 2d 6d 65 6d 6f 72 79 20 63 61 any in-memory ca
3a30: 63 68 65 73 20 6f 66 20 25 5f 64 61 74 61 20 0a ches of %_data .
3a40: 2a 2a 20 72 65 63 6f 72 64 73 20 6d 75 73 74 20 ** records must
3a50: 62 65 20 69 6e 76 61 6c 69 64 61 74 65 64 2e 0a be invalidated..
3a60: 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 */.int sqlite3Ft
3a70: 73 35 49 6e 64 65 78 52 6f 6c 6c 62 61 63 6b 28 s5IndexRollback(
3a80: 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a Fts5Index *p);..
3a90: 2f 2a 0a 2a 2a 20 47 65 74 20 6f 72 20 73 65 74 /*.** Get or set
3aa0: 20 74 68 65 20 22 61 76 65 72 61 67 65 73 22 20 the "averages"
3ab0: 76 61 6c 75 65 73 2e 0a 2a 2f 0a 69 6e 74 20 73 values..*/.int s
3ac0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 47 qlite3Fts5IndexG
3ad0: 65 74 41 76 65 72 61 67 65 73 28 46 74 73 35 49 etAverages(Fts5I
3ae0: 6e 64 65 78 20 2a 70 2c 20 69 36 34 20 2a 70 6e ndex *p, i64 *pn
3af0: 52 6f 77 2c 20 69 36 34 20 2a 61 6e 53 69 7a 65 Row, i64 *anSize
3b00: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 );.int sqlite3Ft
3b10: 73 35 49 6e 64 65 78 53 65 74 41 76 65 72 61 67 s5IndexSetAverag
3b20: 65 73 28 46 74 73 35 49 6e 64 65 78 20 2a 70 2c es(Fts5Index *p,
3b30: 20 63 6f 6e 73 74 20 75 38 2a 2c 20 69 6e 74 29 const u8*, int)
3b40: 3b 0a 0a 2f 2a 0a 2a 2a 20 46 75 6e 63 74 69 6f ;../*.** Functio
3b50: 6e 73 20 63 61 6c 6c 65 64 20 62 79 20 74 68 65 ns called by the
3b60: 20 73 74 6f 72 61 67 65 20 6d 6f 64 75 6c 65 20 storage module
3b70: 61 73 20 70 61 72 74 20 6f 66 20 69 6e 74 65 67 as part of integ
3b80: 72 69 74 79 2d 63 68 65 63 6b 2e 0a 2a 2f 0a 69 rity-check..*/.i
3b90: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e nt sqlite3Fts5In
3ba0: 64 65 78 49 6e 74 65 67 72 69 74 79 43 68 65 63 dexIntegrityChec
3bb0: 6b 28 46 74 73 35 49 6e 64 65 78 2a 2c 20 75 36 k(Fts5Index*, u6
3bc0: 34 20 63 6b 73 75 6d 29 3b 0a 0a 2f 2a 20 0a 2a 4 cksum);../* .*
3bd0: 2a 20 43 61 6c 6c 65 64 20 64 75 72 69 6e 67 20 * Called during
3be0: 76 69 72 74 75 61 6c 20 6d 6f 64 75 6c 65 20 69 virtual module i
3bf0: 6e 69 74 69 61 6c 69 7a 61 74 69 6f 6e 20 74 6f nitialization to
3c00: 20 72 65 67 69 73 74 65 72 20 55 44 46 20 0a 2a register UDF .*
3c10: 2a 20 66 74 73 35 5f 64 65 63 6f 64 65 28 29 20 * fts5_decode()
3c20: 77 69 74 68 20 53 51 4c 69 74 65 20 0a 2a 2f 0a with SQLite .*/.
3c30: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 int sqlite3Fts5I
3c40: 6e 64 65 78 49 6e 69 74 28 73 71 6c 69 74 65 33 ndexInit(sqlite3
3c50: 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 *);..int sqlite3
3c60: 46 74 73 35 49 6e 64 65 78 49 6e 63 72 43 6f 6f Fts5IndexIncrCoo
3c70: 6b 69 65 28 46 74 73 35 49 6e 64 65 78 2a 29 3b kie(Fts5Index*);
3c80: 0a 0a 2f 2a 0a 2a 2a 20 52 65 74 75 72 6e 20 74 ../*.** Return t
3c90: 68 65 20 74 6f 74 61 6c 20 6e 75 6d 62 65 72 20 he total number
3ca0: 6f 66 20 65 6e 74 72 69 65 73 20 72 65 61 64 20 of entries read
3cb0: 66 72 6f 6d 20 74 68 65 20 25 5f 64 61 74 61 20 from the %_data
3cc0: 74 61 62 6c 65 20 62 79 20 0a 2a 2a 20 74 68 69 table by .** thi
3cd0: 73 20 63 6f 6e 6e 65 63 74 69 6f 6e 20 73 69 6e s connection sin
3ce0: 63 65 20 69 74 20 77 61 73 20 63 72 65 61 74 65 ce it was create
3cf0: 64 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 d..*/.int sqlite
3d00: 33 46 74 73 35 49 6e 64 65 78 52 65 61 64 73 28 3Fts5IndexReads(
3d10: 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a Fts5Index *p);..
3d20: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 int sqlite3Fts5I
3d30: 6e 64 65 78 52 65 69 6e 69 74 28 46 74 73 35 49 ndexReinit(Fts5I
3d40: 6e 64 65 78 20 2a 70 29 3b 0a 69 6e 74 20 73 71 ndex *p);.int sq
3d50: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4f 70 lite3Fts5IndexOp
3d60: 74 69 6d 69 7a 65 28 46 74 73 35 49 6e 64 65 78 timize(Fts5Index
3d70: 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 *p);.int sqlite
3d80: 33 46 74 73 35 49 6e 64 65 78 4d 65 72 67 65 28 3Fts5IndexMerge(
3d90: 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 69 6e Fts5Index *p, in
3da0: 74 20 6e 4d 65 72 67 65 29 3b 0a 69 6e 74 20 73 t nMerge);.int s
3db0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4e qlite3Fts5IndexN
3dc0: 65 77 54 72 61 6e 73 28 46 74 73 35 49 6e 64 65 ewTrans(Fts5Inde
3dd0: 78 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 x *p);..int sqli
3de0: 74 65 33 46 74 73 35 49 6e 64 65 78 4c 6f 61 64 te3Fts5IndexLoad
3df0: 43 6f 6e 66 69 67 28 46 74 73 35 49 6e 64 65 78 Config(Fts5Index
3e00: 20 2a 70 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 *p);..void sqli
3e10: 74 65 33 46 74 73 35 49 6e 64 65 78 43 6c 6f 73 te3Fts5IndexClos
3e20: 65 52 65 61 64 65 72 28 46 74 73 35 49 6e 64 65 eReader(Fts5Inde
3e30: 78 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 x*);../*.** End
3e40: 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f 20 of interface to
3e50: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 69 6e 64 code in fts5_ind
3e60: 65 78 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ex.c..**********
3e70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3e80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3e90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3ea0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3eb0: 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a /../************
3ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
3ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a **************.*
3f00: 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20 63 * Interface to c
3f10: 6f 64 65 20 69 6e 20 66 74 73 35 5f 76 61 72 69 ode in fts5_vari
3f20: 6e 74 2e 63 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 nt.c. .*/.int sq
3f30: 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72 69 lite3Fts5GetVari
3f40: 6e 74 33 32 28 63 6f 6e 73 74 20 75 6e 73 69 67 nt32(const unsig
3f50: 6e 65 64 20 63 68 61 72 20 2a 70 2c 20 75 33 32 ned char *p, u32
3f60: 20 2a 76 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 *v);.int sqlite
3f70: 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 4c 65 3Fts5GetVarintLe
3f80: 6e 28 75 33 32 20 69 56 61 6c 29 3b 0a 75 38 20 n(u32 iVal);.u8
3f90: 73 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 sqlite3Fts5GetVa
3fa0: 72 69 6e 74 28 63 6f 6e 73 74 20 75 6e 73 69 67 rint(const unsig
3fb0: 6e 65 64 20 63 68 61 72 2a 2c 20 75 36 34 2a 29 ned char*, u64*)
3fc0: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 ;.int sqlite3Fts
3fd0: 35 50 75 74 56 61 72 69 6e 74 28 75 6e 73 69 67 5PutVarint(unsig
3fe0: 6e 65 64 20 63 68 61 72 20 2a 70 2c 20 75 36 34 ned char *p, u64
3ff0: 20 76 29 3b 0a 0a 23 64 65 66 69 6e 65 20 66 74 v);..#define ft
4000: 73 35 47 65 74 56 61 72 69 6e 74 33 32 28 61 2c s5GetVarint32(a,
4010: 62 29 20 73 71 6c 69 74 65 33 46 74 73 35 47 65 b) sqlite3Fts5Ge
4020: 74 56 61 72 69 6e 74 33 32 28 61 2c 28 75 33 32 tVarint32(a,(u32
4030: 2a 29 26 62 29 0a 23 64 65 66 69 6e 65 20 66 74 *)&b).#define ft
4040: 73 35 47 65 74 56 61 72 69 6e 74 20 20 20 20 73 s5GetVarint s
4050: 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72 qlite3Fts5GetVar
4060: 69 6e 74 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 int..#define fts
4070: 35 46 61 73 74 47 65 74 56 61 72 69 6e 74 33 32 5FastGetVarint32
4080: 28 61 2c 20 69 4f 66 66 2c 20 6e 56 61 6c 29 20 (a, iOff, nVal)
4090: 7b 20 20 20 20 20 20 5c 0a 20 20 6e 56 61 6c 20 { \. nVal
40a0: 3d 20 28 61 29 5b 69 4f 66 66 2b 2b 5d 3b 20 20 = (a)[iOff++];
40b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
40c0: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 20 20 69 \. i
40d0: 66 28 20 6e 56 61 6c 20 26 20 30 78 38 30 20 29 f( nVal & 0x80 )
40e0: 7b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 {
40f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 5c \
4100: 0a 20 20 20 20 69 4f 66 66 2d 2d 3b 20 20 20 20 . iOff--;
4110: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
4120: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
4130: 20 20 20 5c 0a 20 20 20 20 69 4f 66 66 20 2b 3d \. iOff +=
4140: 20 66 74 73 35 47 65 74 56 61 72 69 6e 74 33 32 fts5GetVarint32
4150: 28 26 28 61 29 5b 69 4f 66 66 5d 2c 20 6e 56 61 (&(a)[iOff], nVa
4160: 6c 29 3b 20 20 20 20 5c 0a 20 20 7d 20 20 20 20 l); \. }
4170: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
4180: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
4190: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 7d 0a 0a \.}..
41a0: 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e ./*.** End of in
41b0: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 terface to code
41c0: 69 6e 20 66 74 73 35 5f 76 61 72 69 6e 74 2e 63 in fts5_varint.c
41d0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ..**************
41e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
41f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a ************/...
4220: 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a /***************
4230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 ***********.** I
4270: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 nterface to code
4280: 20 69 6e 20 66 74 73 35 2e 63 2e 20 0a 2a 2f 0a in fts5.c. .*/.
4290: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 .int sqlite3Fts5
42a0: 47 65 74 54 6f 6b 65 6e 69 7a 65 72 28 0a 20 20 GetTokenizer(.
42b0: 46 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 0a 20 20 Fts5Global*, .
42c0: 63 6f 6e 73 74 20 63 68 61 72 20 2a 2a 61 7a 41 const char **azA
42d0: 72 67 2c 0a 20 20 69 6e 74 20 6e 41 72 67 2c 0a rg,. int nArg,.
42e0: 20 20 46 74 73 35 54 6f 6b 65 6e 69 7a 65 72 2a Fts5Tokenizer*
42f0: 2a 2c 0a 20 20 66 74 73 35 5f 74 6f 6b 65 6e 69 *,. fts5_tokeni
4300: 7a 65 72 2a 2a 2c 0a 20 20 63 68 61 72 20 2a 2a zer**,. char **
4310: 70 7a 45 72 72 0a 29 3b 0a 0a 46 74 73 35 49 6e pzErr.);..Fts5In
4320: 64 65 78 20 2a 73 71 6c 69 74 65 33 46 74 73 35 dex *sqlite3Fts5
4330: 49 6e 64 65 78 46 72 6f 6d 43 73 72 69 64 28 46 IndexFromCsrid(F
4340: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 69 36 34 2c ts5Global*, i64,
4350: 20 46 74 73 35 43 6f 6e 66 69 67 20 2a 2a 29 3b Fts5Config **);
4360: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 ../*.** End of i
4370: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 nterface to code
4380: 20 69 6e 20 66 74 73 35 2e 63 2e 0a 2a 2a 2a 2a in fts5.c..****
4390: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
43a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
43b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
43c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
43d0: 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a ******/../******
43e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
43f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4420: 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 ****.** Interfac
4430: 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 e to code in fts
4440: 35 5f 68 61 73 68 2e 63 2e 20 0a 2a 2f 0a 74 79 5_hash.c. .*/.ty
4450: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 pedef struct Fts
4460: 35 48 61 73 68 20 46 74 73 35 48 61 73 68 3b 0a 5Hash Fts5Hash;.
4470: 0a 2f 2a 0a 2a 2a 20 43 72 65 61 74 65 20 61 20 ./*.** Create a
4480: 68 61 73 68 20 74 61 62 6c 65 2c 20 66 72 65 65 hash table, free
4490: 20 61 20 68 61 73 68 20 74 61 62 6c 65 2e 0a 2a a hash table..*
44a0: 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 /.int sqlite3Fts
44b0: 35 48 61 73 68 4e 65 77 28 46 74 73 35 43 6f 6e 5HashNew(Fts5Con
44c0: 66 69 67 2a 2c 20 46 74 73 35 48 61 73 68 2a 2a fig*, Fts5Hash**
44d0: 2c 20 69 6e 74 20 2a 70 6e 53 69 7a 65 29 3b 0a , int *pnSize);.
44e0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 void sqlite3Fts5
44f0: 48 61 73 68 46 72 65 65 28 46 74 73 35 48 61 73 HashFree(Fts5Has
4500: 68 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 h*);..int sqlite
4510: 33 46 74 73 35 48 61 73 68 57 72 69 74 65 28 0a 3Fts5HashWrite(.
4520: 20 20 46 74 73 35 48 61 73 68 2a 2c 0a 20 20 69 Fts5Hash*,. i
4530: 36 34 20 69 52 6f 77 69 64 2c 20 20 20 20 20 20 64 iRowid,
4540: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f /
4550: 2a 20 52 6f 77 69 64 20 66 6f 72 20 74 68 69 73 * Rowid for this
4560: 20 65 6e 74 72 79 20 2a 2f 0a 20 20 69 6e 74 20 entry */. int
4570: 69 43 6f 6c 2c 20 20 20 20 20 20 20 20 20 20 20 iCol,
4580: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 /* C
4590: 6f 6c 75 6d 6e 20 74 6f 6b 65 6e 20 61 70 70 65 olumn token appe
45a0: 61 72 73 20 69 6e 20 28 2d 76 65 20 2d 3e 20 64 ars in (-ve -> d
45b0: 65 6c 65 74 65 29 20 2a 2f 0a 20 20 69 6e 74 20 elete) */. int
45c0: 69 50 6f 73 2c 20 20 20 20 20 20 20 20 20 20 20 iPos,
45d0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 /* P
45e0: 6f 73 69 74 69 6f 6e 20 6f 66 20 74 6f 6b 65 6e osition of token
45f0: 20 77 69 74 68 69 6e 20 63 6f 6c 75 6d 6e 20 2a within column *
4600: 2f 0a 20 20 63 68 61 72 20 62 42 79 74 65 2c 0a /. char bByte,.
4610: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 const char *pT
4620: 6f 6b 65 6e 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e oken, int nToken
4630: 20 20 2f 2a 20 54 6f 6b 65 6e 20 74 6f 20 61 64 /* Token to ad
4640: 64 20 6f 72 20 72 65 6d 6f 76 65 20 74 6f 20 6f d or remove to o
4650: 72 20 66 72 6f 6d 20 69 6e 64 65 78 20 2a 2f 0a r from index */.
4660: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6d 70 74 79 20 );../*.** Empty
4670: 28 62 75 74 20 64 6f 20 6e 6f 74 20 64 65 6c 65 (but do not dele
4680: 74 65 29 20 61 20 68 61 73 68 20 74 61 62 6c 65 te) a hash table
4690: 2e 0a 2a 2f 0a 76 6f 69 64 20 73 71 6c 69 74 65 ..*/.void sqlite
46a0: 33 46 74 73 35 48 61 73 68 43 6c 65 61 72 28 46 3Fts5HashClear(F
46b0: 74 73 35 48 61 73 68 2a 29 3b 0a 0a 69 6e 74 20 ts5Hash*);..int
46c0: 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 51 sqlite3Fts5HashQ
46d0: 75 65 72 79 28 0a 20 20 46 74 73 35 48 61 73 68 uery(. Fts5Hash
46e0: 2a 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 *,
46f0: 20 20 20 20 20 20 20 20 2f 2a 20 48 61 73 68 20 /* Hash
4700: 74 61 62 6c 65 20 74 6f 20 71 75 65 72 79 20 2a table to query *
4710: 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a /. const char *
4720: 70 54 65 72 6d 2c 20 69 6e 74 20 6e 54 65 72 6d pTerm, int nTerm
4730: 2c 20 20 20 2f 2a 20 51 75 65 72 79 20 74 65 72 , /* Query ter
4740: 6d 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20 m */. const u8
4750: 2a 2a 70 70 44 6f 63 6c 69 73 74 2c 20 20 20 20 **ppDoclist,
4760: 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 50 /* OUT: P
4770: 6f 69 6e 74 65 72 20 74 6f 20 64 6f 63 6c 69 73 ointer to doclis
4780: 74 20 66 6f 72 20 70 54 65 72 6d 20 2a 2f 0a 20 t for pTerm */.
4790: 20 69 6e 74 20 2a 70 6e 44 6f 63 6c 69 73 74 20 int *pnDoclist
47a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
47b0: 20 2f 2a 20 4f 55 54 3a 20 53 69 7a 65 20 6f 66 /* OUT: Size of
47c0: 20 64 6f 63 6c 69 73 74 20 69 6e 20 62 79 74 65 doclist in byte
47d0: 73 20 2a 2f 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c s */.);..int sql
47e0: 69 74 65 33 46 74 73 35 48 61 73 68 53 63 61 6e ite3Fts5HashScan
47f0: 49 6e 69 74 28 0a 20 20 46 74 73 35 48 61 73 68 Init(. Fts5Hash
4800: 2a 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 *,
4810: 20 20 20 20 20 20 20 20 2f 2a 20 48 61 73 68 20 /* Hash
4820: 74 61 62 6c 65 20 74 6f 20 71 75 65 72 79 20 2a table to query *
4830: 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a /. const char *
4840: 70 54 65 72 6d 2c 20 69 6e 74 20 6e 54 65 72 6d pTerm, int nTerm
4850: 20 20 20 20 2f 2a 20 51 75 65 72 79 20 70 72 65 /* Query pre
4860: 66 69 78 20 2a 2f 0a 29 3b 0a 76 6f 69 64 20 73 fix */.);.void s
4870: 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 53 63 qlite3Fts5HashSc
4880: 61 6e 4e 65 78 74 28 46 74 73 35 48 61 73 68 2a anNext(Fts5Hash*
4890: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 );.int sqlite3Ft
48a0: 73 35 48 61 73 68 53 63 61 6e 45 6f 66 28 46 74 s5HashScanEof(Ft
48b0: 73 35 48 61 73 68 2a 29 3b 0a 76 6f 69 64 20 73 s5Hash*);.void s
48c0: 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 53 63 qlite3Fts5HashSc
48d0: 61 6e 45 6e 74 72 79 28 46 74 73 35 48 61 73 68 anEntry(Fts5Hash
48e0: 20 2a 2c 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 *,. const char
48f0: 20 2a 2a 70 7a 54 65 72 6d 2c 20 20 20 20 20 20 **pzTerm,
4900: 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 74 65 /* OUT: te
4910: 72 6d 20 28 6e 75 6c 2d 74 65 72 6d 69 6e 61 74 rm (nul-terminat
4920: 65 64 29 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 ed) */. const u
4930: 38 20 2a 2a 70 70 44 6f 63 6c 69 73 74 2c 20 20 8 **ppDoclist,
4940: 20 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a /* OUT:
4950: 20 70 6f 69 6e 74 65 72 20 74 6f 20 64 6f 63 6c pointer to docl
4960: 69 73 74 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 6e ist */. int *pn
4970: 44 6f 63 6c 69 73 74 20 20 20 20 20 20 20 20 20 Doclist
4980: 20 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a /* OUT:
4990: 20 73 69 7a 65 20 6f 66 20 64 6f 63 6c 69 73 74 size of doclist
49a0: 20 69 6e 20 62 79 74 65 73 20 2a 2f 0a 29 3b 0a in bytes */.);.
49b0: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 ../*.** End of i
49c0: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 nterface to code
49d0: 20 69 6e 20 66 74 73 35 5f 68 61 73 68 2e 63 2e in fts5_hash.c.
49e0: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a .***************
49f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a ***********/../*
4a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
4a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 *********.** Int
4a80: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 erface to code i
4a90: 6e 20 66 74 73 35 5f 73 74 6f 72 61 67 65 2e 63 n fts5_storage.c
4aa0: 2e 20 66 74 73 35 5f 73 74 6f 72 61 67 65 2e 63 . fts5_storage.c
4ab0: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 6e 74 61 69 contains contai
4ac0: 6e 73 20 0a 2a 2a 20 63 6f 64 65 20 74 6f 20 61 ns .** code to a
4ad0: 63 63 65 73 73 20 74 68 65 20 64 61 74 61 20 73 ccess the data s
4ae0: 74 6f 72 65 64 20 69 6e 20 74 68 65 20 25 5f 63 tored in the %_c
4af0: 6f 6e 74 65 6e 74 20 61 6e 64 20 25 5f 64 6f 63 ontent and %_doc
4b00: 73 69 7a 65 20 74 61 62 6c 65 73 2e 0a 2a 2f 0a size tables..*/.
4b10: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53 54 .#define FTS5_ST
4b20: 4d 54 5f 53 43 41 4e 5f 41 53 43 20 20 30 20 20 MT_SCAN_ASC 0
4b30: 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77 /* SELECT row
4b40: 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f id, * FROM ... O
4b50: 52 44 45 52 20 42 59 20 31 20 41 53 43 20 2a 2f RDER BY 1 ASC */
4b60: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53 54 .#define FTS5_ST
4b70: 4d 54 5f 53 43 41 4e 5f 44 45 53 43 20 31 20 20 MT_SCAN_DESC 1
4b80: 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77 /* SELECT row
4b90: 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f id, * FROM ... O
4ba0: 52 44 45 52 20 42 59 20 31 20 44 45 53 43 20 2a RDER BY 1 DESC *
4bb0: 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53 /.#define FTS5_S
4bc0: 54 4d 54 5f 4c 4f 4f 4b 55 50 20 20 20 20 32 20 TMT_LOOKUP 2
4bd0: 20 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f /* SELECT ro
4be0: 77 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 wid, * FROM ...
4bf0: 57 48 45 52 45 20 72 6f 77 69 64 3d 3f 20 2a 2f WHERE rowid=? */
4c00: 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 ..typedef struct
4c10: 20 46 74 73 35 53 74 6f 72 61 67 65 20 46 74 73 Fts5Storage Fts
4c20: 35 53 74 6f 72 61 67 65 3b 0a 0a 69 6e 74 20 73 5Storage;..int s
4c30: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 qlite3Fts5Storag
4c40: 65 4f 70 65 6e 28 46 74 73 35 43 6f 6e 66 69 67 eOpen(Fts5Config
4c50: 2a 2c 20 46 74 73 35 49 6e 64 65 78 2a 2c 20 69 *, Fts5Index*, i
4c60: 6e 74 2c 20 46 74 73 35 53 74 6f 72 61 67 65 2a nt, Fts5Storage*
4c70: 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 69 6e 74 20 *, char**);.int
4c80: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 sqlite3Fts5Stora
4c90: 67 65 43 6c 6f 73 65 28 46 74 73 35 53 74 6f 72 geClose(Fts5Stor
4ca0: 61 67 65 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c age *p);.int sql
4cb0: 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 52 ite3Fts5StorageR
4cc0: 65 6e 61 6d 65 28 46 74 73 35 53 74 6f 72 61 67 ename(Fts5Storag
4cd0: 65 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 20 2a e*, const char *
4ce0: 7a 4e 61 6d 65 29 3b 0a 0a 69 6e 74 20 73 71 6c zName);..int sql
4cf0: 69 74 65 33 46 74 73 35 44 72 6f 70 41 6c 6c 28 ite3Fts5DropAll(
4d00: 46 74 73 35 43 6f 6e 66 69 67 2a 29 3b 0a 69 6e Fts5Config*);.in
4d10: 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 72 65 t sqlite3Fts5Cre
4d20: 61 74 65 54 61 62 6c 65 28 46 74 73 35 43 6f 6e ateTable(Fts5Con
4d30: 66 69 67 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 fig*, const char
4d40: 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20 *, const char*,
4d50: 69 6e 74 2c 20 63 68 61 72 20 2a 2a 29 3b 0a 0a int, char **);..
4d60: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 int sqlite3Fts5S
4d70: 74 6f 72 61 67 65 44 65 6c 65 74 65 28 46 74 73 torageDelete(Fts
4d80: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 36 34 5Storage *p, i64
4d90: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a , sqlite3_value*
4da0: 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 *);.int sqlite3F
4db0: 74 73 35 53 74 6f 72 61 67 65 43 6f 6e 74 65 6e ts5StorageConten
4dc0: 74 49 6e 73 65 72 74 28 46 74 73 35 53 74 6f 72 tInsert(Fts5Stor
4dd0: 61 67 65 20 2a 70 2c 20 73 71 6c 69 74 65 33 5f age *p, sqlite3_
4de0: 76 61 6c 75 65 2a 2a 2c 20 69 36 34 2a 29 3b 0a value**, i64*);.
4df0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 int sqlite3Fts5S
4e00: 74 6f 72 61 67 65 49 6e 64 65 78 49 6e 73 65 72 torageIndexInser
4e10: 74 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 t(Fts5Storage *p
4e20: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a , sqlite3_value*
4e30: 2a 2c 20 69 36 34 29 3b 0a 0a 69 6e 74 20 73 71 *, i64);..int sq
4e40: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 lite3Fts5Storage
4e50: 49 6e 74 65 67 72 69 74 79 28 46 74 73 35 53 74 Integrity(Fts5St
4e60: 6f 72 61 67 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 orage *p);..int
4e70: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 sqlite3Fts5Stora
4e80: 67 65 53 74 6d 74 28 46 74 73 35 53 74 6f 72 61 geStmt(Fts5Stora
4e90: 67 65 20 2a 70 2c 20 69 6e 74 20 65 53 74 6d 74 ge *p, int eStmt
4ea0: 2c 20 73 71 6c 69 74 65 33 5f 73 74 6d 74 2a 2a , sqlite3_stmt**
4eb0: 2c 20 63 68 61 72 2a 2a 29 3b 0a 76 6f 69 64 20 , char**);.void
4ec0: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 sqlite3Fts5Stora
4ed0: 67 65 53 74 6d 74 52 65 6c 65 61 73 65 28 46 74 geStmtRelease(Ft
4ee0: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e s5Storage *p, in
4ef0: 74 20 65 53 74 6d 74 2c 20 73 71 6c 69 74 65 33 t eStmt, sqlite3
4f00: 5f 73 74 6d 74 2a 29 3b 0a 0a 69 6e 74 20 73 71 _stmt*);..int sq
4f10: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 lite3Fts5Storage
4f20: 44 6f 63 73 69 7a 65 28 46 74 73 35 53 74 6f 72 Docsize(Fts5Stor
4f30: 61 67 65 20 2a 70 2c 20 69 36 34 20 69 52 6f 77 age *p, i64 iRow
4f40: 69 64 2c 20 69 6e 74 20 2a 61 43 6f 6c 29 3b 0a id, int *aCol);.
4f50: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 int sqlite3Fts5S
4f60: 74 6f 72 61 67 65 53 69 7a 65 28 46 74 73 35 53 torageSize(Fts5S
4f70: 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 69 torage *p, int i
4f80: 43 6f 6c 2c 20 69 36 34 20 2a 70 6e 41 76 67 29 Col, i64 *pnAvg)
4f90: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 ;.int sqlite3Fts
4fa0: 35 53 74 6f 72 61 67 65 52 6f 77 43 6f 75 6e 74 5StorageRowCount
4fb0: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c (Fts5Storage *p,
4fc0: 20 69 36 34 20 2a 70 6e 52 6f 77 29 3b 0a 0a 69 i64 *pnRow);..i
4fd0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 nt sqlite3Fts5St
4fe0: 6f 72 61 67 65 53 79 6e 63 28 46 74 73 35 53 74 orageSync(Fts5St
4ff0: 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 62 43 orage *p, int bC
5000: 6f 6d 6d 69 74 29 3b 0a 69 6e 74 20 73 71 6c 69 ommit);.int sqli
5010: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 52 6f te3Fts5StorageRo
5020: 6c 6c 62 61 63 6b 28 46 74 73 35 53 74 6f 72 61 llback(Fts5Stora
5030: 67 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c ge *p);..int sql
5040: 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 43 ite3Fts5StorageC
5050: 6f 6e 66 69 67 56 61 6c 75 65 28 0a 20 20 20 20 onfigValue(.
5060: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 Fts5Storage *p,
5070: 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20 73 71 6c const char*, sql
5080: 69 74 65 33 5f 76 61 6c 75 65 2a 2c 20 69 6e 74 ite3_value*, int
5090: 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 .);..int sqlite3
50a0: 46 74 73 35 53 74 6f 72 61 67 65 44 65 6c 65 74 Fts5StorageDelet
50b0: 65 41 6c 6c 28 46 74 73 35 53 74 6f 72 61 67 65 eAll(Fts5Storage
50c0: 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 *p);.int sqlite
50d0: 33 46 74 73 35 53 74 6f 72 61 67 65 52 65 62 75 3Fts5StorageRebu
50e0: 69 6c 64 28 46 74 73 35 53 74 6f 72 61 67 65 20 ild(Fts5Storage
50f0: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 *p);.int sqlite3
5100: 46 74 73 35 53 74 6f 72 61 67 65 4f 70 74 69 6d Fts5StorageOptim
5110: 69 7a 65 28 46 74 73 35 53 74 6f 72 61 67 65 20 ize(Fts5Storage
5120: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 *p);.int sqlite3
5130: 46 74 73 35 53 74 6f 72 61 67 65 4d 65 72 67 65 Fts5StorageMerge
5140: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c (Fts5Storage *p,
5150: 20 69 6e 74 20 6e 4d 65 72 67 65 29 3b 0a 69 6e int nMerge);.in
5160: 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f t sqlite3Fts5Sto
5170: 72 61 67 65 52 65 73 65 74 28 46 74 73 35 53 74 rageReset(Fts5St
5180: 6f 72 61 67 65 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a orage *p);../*.*
5190: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 * End of interfa
51a0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 ce to code in ft
51b0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 2e 0a 2a 2a s5_storage.c..**
51c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
51d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
51e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
51f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5200: 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a ********/.../***
5210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5250: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 *******.** Inter
5260: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 face to code in
5270: 66 74 73 35 5f 65 78 70 72 2e 63 2e 20 0a 2a 2f fts5_expr.c. .*/
5280: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 .typedef struct
5290: 46 74 73 35 45 78 70 72 20 46 74 73 35 45 78 70 Fts5Expr Fts5Exp
52a0: 72 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 r;.typedef struc
52b0: 74 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 46 t Fts5ExprNode F
52c0: 74 73 35 45 78 70 72 4e 6f 64 65 3b 0a 74 79 70 ts5ExprNode;.typ
52d0: 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35 edef struct Fts5
52e0: 50 61 72 73 65 20 46 74 73 35 50 61 72 73 65 3b Parse Fts5Parse;
52f0: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 .typedef struct
5300: 46 74 73 35 54 6f 6b 65 6e 20 46 74 73 35 54 6f Fts5Token Fts5To
5310: 6b 65 6e 3b 0a 74 79 70 65 64 65 66 20 73 74 72 ken;.typedef str
5320: 75 63 74 20 46 74 73 35 45 78 70 72 50 68 72 61 uct Fts5ExprPhra
5330: 73 65 20 46 74 73 35 45 78 70 72 50 68 72 61 73 se Fts5ExprPhras
5340: 65 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 e;.typedef struc
5350: 74 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 t Fts5ExprNearse
5360: 74 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 t Fts5ExprNearse
5370: 74 3b 0a 0a 73 74 72 75 63 74 20 46 74 73 35 54 t;..struct Fts5T
5380: 6f 6b 65 6e 20 7b 0a 20 20 63 6f 6e 73 74 20 63 oken {. const c
5390: 68 61 72 20 2a 70 3b 20 20 20 20 20 20 20 20 20 har *p;
53a0: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 6f 6b 65 /* Toke
53b0: 6e 20 74 65 78 74 20 28 6e 6f 74 20 4e 55 4c 4c n text (not NULL
53c0: 20 74 65 72 6d 69 6e 61 74 65 64 29 20 2a 2f 0a terminated) */.
53d0: 20 20 69 6e 74 20 6e 3b 20 20 20 20 20 20 20 20 int n;
53e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20
53f0: 20 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62 75 66 /* Size of buf
5400: 66 65 72 20 70 20 69 6e 20 62 79 74 65 73 20 2a fer p in bytes *
5410: 2f 0a 7d 3b 0a 0a 2f 2a 20 50 61 72 73 65 20 61 /.};../* Parse a
5420: 20 4d 41 54 43 48 20 65 78 70 72 65 73 73 69 6f MATCH expressio
5430: 6e 2e 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 n. */.int sqlite
5440: 33 46 74 73 35 45 78 70 72 4e 65 77 28 0a 20 20 3Fts5ExprNew(.
5450: 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e Fts5Config *pCon
5460: 66 69 67 2c 20 0a 20 20 63 6f 6e 73 74 20 63 68 fig, . const ch
5470: 61 72 20 2a 7a 45 78 70 72 2c 0a 20 20 46 74 73 ar *zExpr,. Fts
5480: 35 45 78 70 72 20 2a 2a 70 70 4e 65 77 2c 20 0a 5Expr **ppNew, .
5490: 20 20 63 68 61 72 20 2a 2a 70 7a 45 72 72 0a 29 char **pzErr.)
54a0: 3b 0a 0a 2f 2a 0a 2a 2a 20 66 6f 72 28 72 63 20 ;../*.** for(rc
54b0: 3d 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 = sqlite3Fts5Exp
54c0: 72 46 69 72 73 74 28 70 45 78 70 72 2c 20 70 49 rFirst(pExpr, pI
54d0: 64 78 2c 20 62 44 65 73 63 29 3b 0a 2a 2a 20 20 dx, bDesc);.**
54e0: 20 20 20 72 63 3d 3d 53 51 4c 49 54 45 5f 4f 4b rc==SQLITE_OK
54f0: 20 26 26 20 30 3d 3d 73 71 6c 69 74 65 33 46 74 && 0==sqlite3Ft
5500: 73 35 45 78 70 72 45 6f 66 28 70 45 78 70 72 29 s5ExprEof(pExpr)
5510: 3b 0a 2a 2a 20 20 20 20 20 72 63 20 3d 20 73 71 ;.** rc = sq
5520: 6c 69 74 65 33 46 74 73 35 45 78 70 72 4e 65 78 lite3Fts5ExprNex
5530: 74 28 70 45 78 70 72 29 0a 2a 2a 20 29 7b 0a 2a t(pExpr).** ){.*
5540: 2a 20 20 20 2f 2f 20 54 68 65 20 64 6f 63 75 6d * // The docum
5550: 65 6e 74 20 77 69 74 68 20 72 6f 77 69 64 20 69 ent with rowid i
5560: 52 6f 77 69 64 20 6d 61 74 63 68 65 73 20 74 68 Rowid matches th
5570: 65 20 65 78 70 72 65 73 73 69 6f 6e 21 0a 2a 2a e expression!.**
5580: 20 20 20 69 36 34 20 69 52 6f 77 69 64 20 3d 20 i64 iRowid =
5590: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 52 sqlite3Fts5ExprR
55a0: 6f 77 69 64 28 70 45 78 70 72 29 3b 0a 2a 2a 20 owid(pExpr);.**
55b0: 7d 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 }.*/.int sqlite3
55c0: 46 74 73 35 45 78 70 72 46 69 72 73 74 28 46 74 Fts5ExprFirst(Ft
55d0: 73 35 45 78 70 72 2a 2c 20 46 74 73 35 49 6e 64 s5Expr*, Fts5Ind
55e0: 65 78 20 2a 70 49 64 78 2c 20 69 36 34 20 69 4d ex *pIdx, i64 iM
55f0: 69 6e 2c 20 69 6e 74 20 62 44 65 73 63 29 3b 0a in, int bDesc);.
5600: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 int sqlite3Fts5E
5610: 78 70 72 4e 65 78 74 28 46 74 73 35 45 78 70 72 xprNext(Fts5Expr
5620: 2a 2c 20 69 36 34 20 69 4d 61 78 29 3b 0a 69 6e *, i64 iMax);.in
5630: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 t sqlite3Fts5Exp
5640: 72 45 6f 66 28 46 74 73 35 45 78 70 72 2a 29 3b rEof(Fts5Expr*);
5650: 0a 69 36 34 20 73 71 6c 69 74 65 33 46 74 73 35 .i64 sqlite3Fts5
5660: 45 78 70 72 52 6f 77 69 64 28 46 74 73 35 45 78 ExprRowid(Fts5Ex
5670: 70 72 2a 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 pr*);..void sqli
5680: 74 65 33 46 74 73 35 45 78 70 72 46 72 65 65 28 te3Fts5ExprFree(
5690: 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a 2f 2a 20 Fts5Expr*);../*
56a0: 43 61 6c 6c 65 64 20 64 75 72 69 6e 67 20 73 74 Called during st
56b0: 61 72 74 75 70 20 74 6f 20 72 65 67 69 73 74 65 artup to registe
56c0: 72 20 61 20 55 44 46 20 77 69 74 68 20 53 51 4c r a UDF with SQL
56d0: 69 74 65 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 ite */.int sqlit
56e0: 65 33 46 74 73 35 45 78 70 72 49 6e 69 74 28 46 e3Fts5ExprInit(F
56f0: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69 ts5Global*, sqli
5700: 74 65 33 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 te3*);..int sqli
5710: 74 65 33 46 74 73 35 45 78 70 72 50 68 72 61 73 te3Fts5ExprPhras
5720: 65 43 6f 75 6e 74 28 46 74 73 35 45 78 70 72 2a eCount(Fts5Expr*
5730: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 );.int sqlite3Ft
5740: 73 35 45 78 70 72 50 68 72 61 73 65 53 69 7a 65 s5ExprPhraseSize
5750: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 20 (Fts5Expr*, int
5760: 69 50 68 72 61 73 65 29 3b 0a 69 6e 74 20 73 71 iPhrase);.int sq
5770: 6c 69 74 65 33 46 74 73 35 45 78 70 72 50 6f 73 lite3Fts5ExprPos
5780: 6c 69 73 74 28 46 74 73 35 45 78 70 72 2a 2c 20 list(Fts5Expr*,
5790: 69 6e 74 2c 20 63 6f 6e 73 74 20 75 38 20 2a 2a int, const u8 **
57a0: 29 3b 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 );..typedef stru
57b0: 63 74 20 46 74 73 35 50 6f 73 6c 69 73 74 50 6f ct Fts5PoslistPo
57c0: 70 75 6c 61 74 6f 72 20 46 74 73 35 50 6f 73 6c pulator Fts5Posl
57d0: 69 73 74 50 6f 70 75 6c 61 74 6f 72 3b 0a 46 74 istPopulator;.Ft
57e0: 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61 74 s5PoslistPopulat
57f0: 6f 72 20 2a 73 71 6c 69 74 65 33 46 74 73 35 45 or *sqlite3Fts5E
5800: 78 70 72 43 6c 65 61 72 50 6f 73 6c 69 73 74 73 xprClearPoslists
5810: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 29 (Fts5Expr*, int)
5820: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 ;.int sqlite3Fts
5830: 35 45 78 70 72 50 6f 70 75 6c 61 74 65 50 6f 73 5ExprPopulatePos
5840: 6c 69 73 74 73 28 0a 20 20 20 20 46 74 73 35 43 lists(. Fts5C
5850: 6f 6e 66 69 67 2a 2c 20 46 74 73 35 45 78 70 72 onfig*, Fts5Expr
5860: 2a 2c 20 46 74 73 35 50 6f 73 6c 69 73 74 50 6f *, Fts5PoslistPo
5870: 70 75 6c 61 74 6f 72 2a 2c 20 69 6e 74 2c 20 63 pulator*, int, c
5880: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 0a onst char*, int.
5890: 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 );.void sqlite3F
58a0: 74 73 35 45 78 70 72 43 68 65 63 6b 50 6f 73 6c ts5ExprCheckPosl
58b0: 69 73 74 73 28 46 74 73 35 45 78 70 72 2a 2c 20 ists(Fts5Expr*,
58c0: 69 36 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 i64);.void sqlit
58d0: 65 33 46 74 73 35 45 78 70 72 43 6c 65 61 72 45 e3Fts5ExprClearE
58e0: 6f 66 28 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a of(Fts5Expr*);..
58f0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 int sqlite3Fts5E
5900: 78 70 72 43 6c 6f 6e 65 50 68 72 61 73 65 28 46 xprClonePhrase(F
5910: 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 2c 20 46 ts5Expr*, int, F
5920: 74 73 35 45 78 70 72 2a 2a 29 3b 0a 0a 69 6e 74 ts5Expr**);..int
5930: 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 sqlite3Fts5Expr
5940: 50 68 72 61 73 65 43 6f 6c 6c 69 73 74 28 46 74 PhraseCollist(Ft
5950: 73 35 45 78 70 72 20 2a 2c 20 69 6e 74 2c 20 63 s5Expr *, int, c
5960: 6f 6e 73 74 20 75 38 20 2a 2a 2c 20 69 6e 74 20 onst u8 **, int
5970: 2a 29 3b 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a *);../**********
5980: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5990: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
59a0: 2a 0a 2a 2a 20 54 68 65 20 66 74 73 35 5f 65 78 *.** The fts5_ex
59b0: 70 72 2e 63 20 41 50 49 20 61 62 6f 76 65 20 74 pr.c API above t
59c0: 68 69 73 20 70 6f 69 6e 74 20 69 73 20 75 73 65 his point is use
59d0: 64 20 62 79 20 74 68 65 20 6f 74 68 65 72 20 68 d by the other h
59e0: 61 6e 64 2d 77 72 69 74 74 65 6e 0a 2a 2a 20 43 and-written.** C
59f0: 20 63 6f 64 65 20 69 6e 20 74 68 69 73 20 6d 6f code in this mo
5a00: 64 75 6c 65 2e 20 54 68 65 20 69 6e 74 65 72 66 dule. The interf
5a10: 61 63 65 73 20 62 65 6c 6f 77 20 74 68 69 73 20 aces below this
5a20: 70 6f 69 6e 74 20 61 72 65 20 63 61 6c 6c 65 64 point are called
5a30: 20 62 79 0a 2a 2a 20 74 68 65 20 70 61 72 73 65 by.** the parse
5a40: 72 20 63 6f 64 65 20 69 6e 20 66 74 73 35 70 61 r code in fts5pa
5a50: 72 73 65 2e 79 2e 20 20 2a 2f 0a 0a 76 6f 69 64 rse.y. */..void
5a60: 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 sqlite3Fts5Pars
5a70: 65 45 72 72 6f 72 28 46 74 73 35 50 61 72 73 65 eError(Fts5Parse
5a80: 20 2a 70 50 61 72 73 65 2c 20 63 6f 6e 73 74 20 *pParse, const
5a90: 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 char *zFmt, ...)
5aa0: 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64 65 20 ;..Fts5ExprNode
5ab0: 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 *sqlite3Fts5Pars
5ac0: 65 4e 6f 64 65 28 0a 20 20 46 74 73 35 50 61 72 eNode(. Fts5Par
5ad0: 73 65 20 2a 70 50 61 72 73 65 2c 0a 20 20 69 6e se *pParse,. in
5ae0: 74 20 65 54 79 70 65 2c 0a 20 20 46 74 73 35 45 t eType,. Fts5E
5af0: 78 70 72 4e 6f 64 65 20 2a 70 4c 65 66 74 2c 0a xprNode *pLeft,.
5b00: 20 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a Fts5ExprNode *
5b10: 70 52 69 67 68 74 2c 0a 20 20 46 74 73 35 45 78 pRight,. Fts5Ex
5b20: 70 72 4e 65 61 72 73 65 74 20 2a 70 4e 65 61 72 prNearset *pNear
5b30: 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64 .);..Fts5ExprNod
5b40: 65 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61 e *sqlite3Fts5Pa
5b50: 72 73 65 49 6d 70 6c 69 63 69 74 41 6e 64 28 0a rseImplicitAnd(.
5b60: 20 20 46 74 73 35 50 61 72 73 65 20 2a 70 50 61 Fts5Parse *pPa
5b70: 72 73 65 2c 0a 20 20 46 74 73 35 45 78 70 72 4e rse,. Fts5ExprN
5b80: 6f 64 65 20 2a 70 4c 65 66 74 2c 0a 20 20 46 74 ode *pLeft,. Ft
5b90: 73 35 45 78 70 72 4e 6f 64 65 20 2a 70 52 69 67 s5ExprNode *pRig
5ba0: 68 74 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 50 ht.);..Fts5ExprP
5bb0: 68 72 61 73 65 20 2a 73 71 6c 69 74 65 33 46 74 hrase *sqlite3Ft
5bc0: 73 35 50 61 72 73 65 54 65 72 6d 28 0a 20 20 46 s5ParseTerm(. F
5bd0: 74 73 35 50 61 72 73 65 20 2a 70 50 61 72 73 65 ts5Parse *pParse
5be0: 2c 20 0a 20 20 46 74 73 35 45 78 70 72 50 68 72 , . Fts5ExprPhr
5bf0: 61 73 65 20 2a 70 50 68 72 61 73 65 2c 20 0a 20 ase *pPhrase, .
5c00: 20 46 74 73 35 54 6f 6b 65 6e 20 2a 70 54 6f 6b Fts5Token *pTok
5c10: 65 6e 2c 0a 20 20 69 6e 74 20 62 50 72 65 66 69 en,. int bPrefi
5c20: 78 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 65 x.);..Fts5ExprNe
5c30: 61 72 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74 arset *sqlite3Ft
5c40: 73 35 50 61 72 73 65 4e 65 61 72 73 65 74 28 0a s5ParseNearset(.
5c50: 20 20 46 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 Fts5Parse*, .
5c60: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74 Fts5ExprNearset
5c70: 2a 2c 0a 20 20 46 74 73 35 45 78 70 72 50 68 72 *,. Fts5ExprPhr
5c80: 61 73 65 2a 20 0a 29 3b 0a 0a 46 74 73 35 43 6f ase* .);..Fts5Co
5c90: 6c 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73 lset *sqlite3Fts
5ca0: 35 50 61 72 73 65 43 6f 6c 73 65 74 28 0a 20 20 5ParseColset(.
5cb0: 46 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 20 46 Fts5Parse*, . F
5cc0: 74 73 35 43 6f 6c 73 65 74 2a 2c 20 0a 20 20 46 ts5Colset*, . F
5cd0: 74 73 35 54 6f 6b 65 6e 20 2a 0a 29 3b 0a 0a 76 ts5Token *.);..v
5ce0: 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 oid sqlite3Fts5P
5cf0: 61 72 73 65 50 68 72 61 73 65 46 72 65 65 28 46 arsePhraseFree(F
5d00: 74 73 35 45 78 70 72 50 68 72 61 73 65 2a 29 3b ts5ExprPhrase*);
5d10: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 .void sqlite3Fts
5d20: 35 50 61 72 73 65 4e 65 61 72 73 65 74 46 72 65 5ParseNearsetFre
5d30: 65 28 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 e(Fts5ExprNearse
5d40: 74 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 t*);.void sqlite
5d50: 33 46 74 73 35 50 61 72 73 65 4e 6f 64 65 46 72 3Fts5ParseNodeFr
5d60: 65 65 28 46 74 73 35 45 78 70 72 4e 6f 64 65 2a ee(Fts5ExprNode*
5d70: 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 );..void sqlite3
5d80: 46 74 73 35 50 61 72 73 65 53 65 74 44 69 73 74 Fts5ParseSetDist
5d90: 61 6e 63 65 28 46 74 73 35 50 61 72 73 65 2a 2c ance(Fts5Parse*,
5da0: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74 Fts5ExprNearset
5db0: 2a 2c 20 46 74 73 35 54 6f 6b 65 6e 2a 29 3b 0a *, Fts5Token*);.
5dc0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 void sqlite3Fts5
5dd0: 50 61 72 73 65 53 65 74 43 6f 6c 73 65 74 28 46 ParseSetColset(F
5de0: 74 73 35 50 61 72 73 65 2a 2c 20 46 74 73 35 45 ts5Parse*, Fts5E
5df0: 78 70 72 4e 65 61 72 73 65 74 2a 2c 20 46 74 73 xprNearset*, Fts
5e00: 35 43 6f 6c 73 65 74 2a 29 3b 0a 76 6f 69 64 20 5Colset*);.void
5e10: 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 sqlite3Fts5Parse
5e20: 46 69 6e 69 73 68 65 64 28 46 74 73 35 50 61 72 Finished(Fts5Par
5e30: 73 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 se *pParse, Fts5
5e40: 45 78 70 72 4e 6f 64 65 20 2a 70 29 3b 0a 76 6f ExprNode *p);.vo
5e50: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 id sqlite3Fts5Pa
5e60: 72 73 65 4e 65 61 72 28 46 74 73 35 50 61 72 73 rseNear(Fts5Pars
5e70: 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 54 e *pParse, Fts5T
5e80: 6f 6b 65 6e 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 oken*);../*.** E
5e90: 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 nd of interface
5ea0: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f to code in fts5_
5eb0: 65 78 70 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a expr.c..********
5ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5f00: 2a 2a 2f 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a **/..../********
5f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5f20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5f30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5f40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5f50: 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 **.** Interface
5f60: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f to code in fts5_
5f70: 61 75 78 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74 20 aux.c. .*/..int
5f80: 73 71 6c 69 74 65 33 46 74 73 35 41 75 78 49 6e sqlite3Fts5AuxIn
5f90: 69 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f it(fts5_api*);./
5fa0: 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 *.** End of inte
5fb0: 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e rface to code in
5fc0: 20 66 74 73 35 5f 61 75 78 2e 63 2e 0a 2a 2a 2a fts5_aux.c..***
5fd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5fe0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
5ff0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6000: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6010: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a *******/../*****
6020: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6030: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6040: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6050: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6060: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 *****.** Interfa
6070: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 ce to code in ft
6080: 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 2e 20 s5_tokenizer.c.
6090: 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 .*/..int sqlite3
60a0: 46 74 73 35 54 6f 6b 65 6e 69 7a 65 72 49 6e 69 Fts5TokenizerIni
60b0: 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f 2a t(fts5_api*);./*
60c0: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 .** End of inter
60d0: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 face to code in
60e0: 66 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 fts5_tokenizer.c
60f0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ..**************
6100: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6110: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6120: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f ************/../
6140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6170: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6180: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e **********.** In
6190: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 terface to code
61a0: 69 6e 20 66 74 73 35 5f 76 6f 63 61 62 2e 63 2e in fts5_vocab.c.
61b0: 20 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 .*/..int sqlite
61c0: 33 46 74 73 35 56 6f 63 61 62 49 6e 69 74 28 46 3Fts5VocabInit(F
61d0: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69 ts5Global*, sqli
61e0: 74 65 33 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e te3*);../*.** En
61f0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 d of interface t
6200: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 76 o code in fts5_v
6210: 6f 63 61 62 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a ocab.c..********
6220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6260: 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a **/.../*********
6270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
6290: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
62a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
62b0: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 *.** Interface t
62c0: 6f 20 61 75 74 6f 6d 61 74 69 63 61 6c 6c 79 20 o automatically
62d0: 67 65 6e 65 72 61 74 65 64 20 63 6f 64 65 20 69 generated code i
62e0: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e n fts5_unicode2.
62f0: 63 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 c. .*/.int sqlit
6300: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 49 73 61 e3Fts5UnicodeIsa
6310: 6c 6e 75 6d 28 69 6e 74 20 63 29 3b 0a 69 6e 74 lnum(int c);.int
6320: 20 73 71 6c 69 74 65 33 46 74 73 35 55 6e 69 63 sqlite3Fts5Unic
6330: 6f 64 65 49 73 64 69 61 63 72 69 74 69 63 28 69 odeIsdiacritic(i
6340: 6e 74 20 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74 nt c);.int sqlit
6350: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 46 6f 6c e3Fts5UnicodeFol
6360: 64 28 69 6e 74 20 63 2c 20 69 6e 74 20 62 52 65 d(int c, int bRe
6370: 6d 6f 76 65 44 69 61 63 72 69 74 69 63 29 3b 0a moveDiacritic);.
6380: 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 /*.** End of int
6390: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 erface to code i
63a0: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e n fts5_unicode2.
63b0: 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a c..*************
63c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
63d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
63e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a ****************
63f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a *************/..
6400: 23 65 6e 64 69 66 0a #endif.