/ Hex Artifact Content
Login
SQLite training in Houston TX on 2019-11-05 (details)
Part of the 2019 Tcl Conference

Artifact 31b6cbbd9ff5dfdcafe702ea2eb4a93f66979b72:


0000: 2f 2a 0a 2a 2a 20 32 30 31 34 20 4d 61 79 20 33  /*.** 2014 May 3
0010: 31 0a 2a 2a 0a 2a 2a 20 54 68 65 20 61 75 74 68  1.**.** The auth
0020: 6f 72 20 64 69 73 63 6c 61 69 6d 73 20 63 6f 70  or disclaims cop
0030: 79 72 69 67 68 74 20 74 6f 20 74 68 69 73 20 73  yright to this s
0040: 6f 75 72 63 65 20 63 6f 64 65 2e 20 20 49 6e 20  ource code.  In 
0050: 70 6c 61 63 65 20 6f 66 0a 2a 2a 20 61 20 6c 65  place of.** a le
0060: 67 61 6c 20 6e 6f 74 69 63 65 2c 20 68 65 72 65  gal notice, here
0070: 20 69 73 20 61 20 62 6c 65 73 73 69 6e 67 3a 0a   is a blessing:.
0080: 2a 2a 0a 2a 2a 20 20 20 20 4d 61 79 20 79 6f 75  **.**    May you
0090: 20 64 6f 20 67 6f 6f 64 20 61 6e 64 20 6e 6f 74   do good and not
00a0: 20 65 76 69 6c 2e 0a 2a 2a 20 20 20 20 4d 61 79   evil..**    May
00b0: 20 79 6f 75 20 66 69 6e 64 20 66 6f 72 67 69 76   you find forgiv
00c0: 65 6e 65 73 73 20 66 6f 72 20 79 6f 75 72 73 65  eness for yourse
00d0: 6c 66 20 61 6e 64 20 66 6f 72 67 69 76 65 20 6f  lf and forgive o
00e0: 74 68 65 72 73 2e 0a 2a 2a 20 20 20 20 4d 61 79  thers..**    May
00f0: 20 79 6f 75 20 73 68 61 72 65 20 66 72 65 65 6c   you share freel
0100: 79 2c 20 6e 65 76 65 72 20 74 61 6b 69 6e 67 20  y, never taking 
0110: 6d 6f 72 65 20 74 68 61 6e 20 79 6f 75 20 67 69  more than you gi
0120: 76 65 2e 0a 2a 2a 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ve..**.*********
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0170: 2a 2a 2a 2a 2a 0a 2a 2a 0a 2a 2f 0a 23 69 66 6e  *****.**.*/.#ifn
0180: 64 65 66 20 5f 46 54 53 35 49 4e 54 5f 48 0a 23  def _FTS5INT_H.#
0190: 64 65 66 69 6e 65 20 5f 46 54 53 35 49 4e 54 5f  define _FTS5INT_
01a0: 48 0a 0a 23 69 6e 63 6c 75 64 65 20 22 66 74 73  H..#include "fts
01b0: 35 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 73  5.h".#include "s
01c0: 71 6c 69 74 65 33 65 78 74 2e 68 22 0a 53 51 4c  qlite3ext.h".SQL
01d0: 49 54 45 5f 45 58 54 45 4e 53 49 4f 4e 5f 49 4e  ITE_EXTENSION_IN
01e0: 49 54 31 0a 0a 23 69 6e 63 6c 75 64 65 20 3c 73  IT1..#include <s
01f0: 74 72 69 6e 67 2e 68 3e 0a 23 69 6e 63 6c 75 64  tring.h>.#includ
0200: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 23 69  e <assert.h>..#i
0210: 66 6e 64 65 66 20 53 51 4c 49 54 45 5f 41 4d 41  fndef SQLITE_AMA
0220: 4c 47 41 4d 41 54 49 4f 4e 0a 0a 74 79 70 65 64  LGAMATION..typed
0230: 65 66 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72  ef unsigned char
0240: 20 20 75 38 3b 0a 74 79 70 65 64 65 66 20 75 6e    u8;.typedef un
0250: 73 69 67 6e 65 64 20 69 6e 74 20 20 20 75 33 32  signed int   u32
0260: 3b 0a 74 79 70 65 64 65 66 20 75 6e 73 69 67 6e  ;.typedef unsign
0270: 65 64 20 73 68 6f 72 74 20 75 31 36 3b 0a 74 79  ed short u16;.ty
0280: 70 65 64 65 66 20 73 68 6f 72 74 20 69 31 36 3b  pedef short i16;
0290: 0a 74 79 70 65 64 65 66 20 73 71 6c 69 74 65 33  .typedef sqlite3
02a0: 5f 69 6e 74 36 34 20 69 36 34 3b 0a 74 79 70 65  _int64 i64;.type
02b0: 64 65 66 20 73 71 6c 69 74 65 33 5f 75 69 6e 74  def sqlite3_uint
02c0: 36 34 20 75 36 34 3b 0a 0a 23 64 65 66 69 6e 65  64 u64;..#define
02d0: 20 41 72 72 61 79 53 69 7a 65 28 78 29 20 28 28   ArraySize(x) ((
02e0: 69 6e 74 29 28 73 69 7a 65 6f 66 28 78 29 20 2f  int)(sizeof(x) /
02f0: 20 73 69 7a 65 6f 66 28 78 5b 30 5d 29 29 29 0a   sizeof(x[0]))).
0300: 0a 23 64 65 66 69 6e 65 20 74 65 73 74 63 61 73  .#define testcas
0310: 65 28 78 29 0a 23 64 65 66 69 6e 65 20 41 4c 57  e(x).#define ALW
0320: 41 59 53 28 78 29 20 31 0a 23 64 65 66 69 6e 65  AYS(x) 1.#define
0330: 20 4e 45 56 45 52 28 78 29 20 30 0a 0a 23 64 65   NEVER(x) 0..#de
0340: 66 69 6e 65 20 4d 49 4e 28 78 2c 79 29 20 28 28  fine MIN(x,y) ((
0350: 28 78 29 20 3c 20 28 79 29 29 20 3f 20 28 78 29  (x) < (y)) ? (x)
0360: 20 3a 20 28 79 29 29 0a 23 64 65 66 69 6e 65 20   : (y)).#define 
0370: 4d 41 58 28 78 2c 79 29 20 28 28 28 78 29 20 3e  MAX(x,y) (((x) >
0380: 20 28 79 29 29 20 3f 20 28 78 29 20 3a 20 28 79   (y)) ? (x) : (y
0390: 29 29 0a 0a 2f 2a 0a 2a 2a 20 43 6f 6e 73 74 61  ))../*.** Consta
03a0: 6e 74 73 20 66 6f 72 20 74 68 65 20 6c 61 72 67  nts for the larg
03b0: 65 73 74 20 61 6e 64 20 73 6d 61 6c 6c 65 73 74  est and smallest
03c0: 20 70 6f 73 73 69 62 6c 65 20 36 34 2d 62 69 74   possible 64-bit
03d0: 20 73 69 67 6e 65 64 20 69 6e 74 65 67 65 72 73   signed integers
03e0: 2e 0a 2a 2f 0a 23 20 64 65 66 69 6e 65 20 4c 41  ..*/.# define LA
03f0: 52 47 45 53 54 5f 49 4e 54 36 34 20 20 28 30 78  RGEST_INT64  (0x
0400: 66 66 66 66 66 66 66 66 7c 28 28 28 69 36 34 29  ffffffff|(((i64)
0410: 30 78 37 66 66 66 66 66 66 66 29 3c 3c 33 32 29  0x7fffffff)<<32)
0420: 29 0a 23 20 64 65 66 69 6e 65 20 53 4d 41 4c 4c  ).# define SMALL
0430: 45 53 54 5f 49 4e 54 36 34 20 28 28 28 69 36 34  EST_INT64 (((i64
0440: 29 2d 31 29 20 2d 20 4c 41 52 47 45 53 54 5f 49  )-1) - LARGEST_I
0450: 4e 54 36 34 29 0a 0a 23 65 6e 64 69 66 0a 0a 2f  NT64)..#endif../
0460: 2a 20 54 72 75 6e 63 61 74 65 20 76 65 72 79 20  * Truncate very 
0470: 6c 6f 6e 67 20 74 6f 6b 65 6e 73 20 74 6f 20 74  long tokens to t
0480: 68 69 73 20 6d 61 6e 79 20 62 79 74 65 73 2e 20  his many bytes. 
0490: 48 61 72 64 20 6c 69 6d 69 74 20 69 73 20 0a 2a  Hard limit is .*
04a0: 2a 20 28 36 35 35 33 36 2d 31 2d 31 2d 34 2d 39  * (65536-1-1-4-9
04b0: 29 3d 3d 36 35 35 32 31 20 62 79 74 65 73 2e 20  )==65521 bytes. 
04c0: 54 68 65 20 6c 69 6d 69 74 69 6e 67 20 66 61 63  The limiting fac
04d0: 74 6f 72 20 69 73 20 74 68 65 20 31 36 2d 62 69  tor is the 16-bi
04e0: 74 20 6f 66 66 73 65 74 0a 2a 2a 20 66 69 65 6c  t offset.** fiel
04f0: 64 20 74 68 61 74 20 6f 63 63 75 72 73 20 61 74  d that occurs at
0500: 20 74 68 65 20 73 74 61 72 74 20 6f 66 20 65 61   the start of ea
0510: 63 68 20 6c 65 61 66 20 70 61 67 65 20 28 73 65  ch leaf page (se
0520: 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 29 2e  e fts5_index.c).
0530: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
0540: 5f 4d 41 58 5f 54 4f 4b 45 4e 5f 53 49 5a 45 20  _MAX_TOKEN_SIZE 
0550: 33 32 37 36 38 0a 0a 2f 2a 0a 2a 2a 20 4d 61 78  32768../*.** Max
0560: 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f 66 20 70  imum number of p
0570: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 6f 6e  refix indexes on
0580: 20 73 69 6e 67 6c 65 20 46 54 53 35 20 74 61 62   single FTS5 tab
0590: 6c 65 2e 20 54 68 69 73 20 6d 75 73 74 20 62 65  le. This must be
05a0: 0a 2a 2a 20 6c 65 73 73 20 74 68 61 6e 20 33 32  .** less than 32
05b0: 2e 20 49 66 20 69 74 20 69 73 20 73 65 74 20 74  . If it is set t
05c0: 6f 20 61 6e 79 74 68 69 6e 67 20 6c 61 72 67 65  o anything large
05d0: 20 74 68 61 6e 20 74 68 61 74 2c 20 61 6e 20 23   than that, an #
05e0: 65 72 72 6f 72 0a 2a 2a 20 64 69 72 65 63 74 69  error.** directi
05f0: 76 65 20 69 6e 20 66 74 73 35 5f 69 6e 64 65 78  ve in fts5_index
0600: 2e 63 20 77 69 6c 6c 20 63 61 75 73 65 20 74 68  .c will cause th
0610: 65 20 62 75 69 6c 64 20 74 6f 20 66 61 69 6c 2e  e build to fail.
0620: 0a 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35  .*/.#define FTS5
0630: 5f 4d 41 58 5f 50 52 45 46 49 58 5f 49 4e 44 45  _MAX_PREFIX_INDE
0640: 58 45 53 20 33 31 0a 0a 23 64 65 66 69 6e 65 20  XES 31..#define 
0650: 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 4e 45 41  FTS5_DEFAULT_NEA
0660: 52 44 49 53 54 20 31 30 0a 23 64 65 66 69 6e 65  RDIST 10.#define
0670: 20 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 52 41   FTS5_DEFAULT_RA
0680: 4e 4b 20 20 20 20 20 22 62 6d 32 35 22 0a 0a 2f  NK     "bm25"../
0690: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 61  * Name of rank a
06a0: 6e 64 20 72 6f 77 69 64 20 63 6f 6c 75 6d 6e 73  nd rowid columns
06b0: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
06c0: 5f 52 41 4e 4b 5f 4e 41 4d 45 20 22 72 61 6e 6b  _RANK_NAME "rank
06d0: 22 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 52  ".#define FTS5_R
06e0: 4f 57 49 44 5f 4e 41 4d 45 20 22 72 6f 77 69 64  OWID_NAME "rowid
06f0: 22 0a 0a 23 69 66 64 65 66 20 53 51 4c 49 54 45  "..#ifdef SQLITE
0700: 5f 44 45 42 55 47 0a 23 20 64 65 66 69 6e 65 20  _DEBUG.# define 
0710: 46 54 53 35 5f 43 4f 52 52 55 50 54 20 73 71 6c  FTS5_CORRUPT sql
0720: 69 74 65 33 46 74 73 35 43 6f 72 72 75 70 74 28  ite3Fts5Corrupt(
0730: 29 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ).int sqlite3Fts
0740: 35 43 6f 72 72 75 70 74 28 76 6f 69 64 29 3b 0a  5Corrupt(void);.
0750: 23 65 6c 73 65 0a 23 20 64 65 66 69 6e 65 20 46  #else.# define F
0760: 54 53 35 5f 43 4f 52 52 55 50 54 20 53 51 4c 49  TS5_CORRUPT SQLI
0770: 54 45 5f 43 4f 52 52 55 50 54 5f 56 54 41 42 0a  TE_CORRUPT_VTAB.
0780: 23 65 6e 64 69 66 0a 0a 2f 2a 0a 2a 2a 20 54 68  #endif../*.** Th
0790: 65 20 61 73 73 65 72 74 5f 6e 63 28 29 20 6d 61  e assert_nc() ma
07a0: 63 72 6f 20 69 73 20 73 69 6d 69 6c 61 72 20 74  cro is similar t
07b0: 6f 20 74 68 65 20 61 73 73 65 72 74 28 29 20 6d  o the assert() m
07c0: 61 63 72 6f 2c 20 65 78 63 65 70 74 20 74 68 61  acro, except tha
07d0: 74 20 69 74 0a 2a 2a 20 69 73 20 75 73 65 64 20  t it.** is used 
07e0: 66 6f 72 20 61 73 73 65 72 74 28 29 20 63 6f 6e  for assert() con
07f0: 64 69 74 69 6f 6e 73 20 74 68 61 74 20 61 72 65  ditions that are
0800: 20 74 72 75 65 20 6f 6e 6c 79 20 69 66 20 69 74   true only if it
0810: 20 63 61 6e 20 62 65 20 0a 2a 2a 20 67 75 72 61   can be .** gura
0820: 6e 74 65 65 64 20 74 68 61 74 20 74 68 65 20 64  nteed that the d
0830: 61 74 61 62 61 73 65 20 69 73 20 6e 6f 74 20 63  atabase is not c
0840: 6f 72 72 75 70 74 2e 0a 2a 2f 0a 23 69 66 64 65  orrupt..*/.#ifde
0850: 66 20 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 65  f SQLITE_DEBUG.e
0860: 78 74 65 72 6e 20 69 6e 74 20 73 71 6c 69 74 65  xtern int sqlite
0870: 33 5f 66 74 73 35 5f 6d 61 79 5f 62 65 5f 63 6f  3_fts5_may_be_co
0880: 72 72 75 70 74 3b 0a 23 20 64 65 66 69 6e 65 20  rrupt;.# define 
0890: 61 73 73 65 72 74 5f 6e 63 28 78 29 20 61 73 73  assert_nc(x) ass
08a0: 65 72 74 28 73 71 6c 69 74 65 33 5f 66 74 73 35  ert(sqlite3_fts5
08b0: 5f 6d 61 79 5f 62 65 5f 63 6f 72 72 75 70 74 20  _may_be_corrupt 
08c0: 7c 7c 20 28 78 29 29 0a 23 65 6c 73 65 0a 23 20  || (x)).#else.# 
08d0: 64 65 66 69 6e 65 20 61 73 73 65 72 74 5f 6e 63  define assert_nc
08e0: 28 78 29 20 61 73 73 65 72 74 28 78 29 0a 23 65  (x) assert(x).#e
08f0: 6e 64 69 66 0a 0a 2f 2a 20 4d 61 72 6b 20 61 20  ndif../* Mark a 
0900: 66 75 6e 63 74 69 6f 6e 20 70 61 72 61 6d 65 74  function paramet
0910: 65 72 20 61 73 20 75 6e 75 73 65 64 2c 20 74 6f  er as unused, to
0920: 20 73 75 70 70 72 65 73 73 20 6e 75 69 73 61 6e   suppress nuisan
0930: 63 65 20 63 6f 6d 70 69 6c 65 72 0a 2a 2a 20 77  ce compiler.** w
0940: 61 72 6e 69 6e 67 73 2e 20 2a 2f 0a 23 69 66 6e  arnings. */.#ifn
0950: 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41 4d  def UNUSED_PARAM
0960: 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53 45 44  .# define UNUSED
0970: 5f 50 41 52 41 4d 28 58 29 20 20 28 76 6f 69 64  _PARAM(X)  (void
0980: 29 28 58 29 0a 23 65 6e 64 69 66 0a 0a 23 69 66  )(X).#endif..#if
0990: 6e 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41  ndef UNUSED_PARA
09a0: 4d 32 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53  M2.# define UNUS
09b0: 45 44 5f 50 41 52 41 4d 32 28 58 2c 20 59 29 20  ED_PARAM2(X, Y) 
09c0: 20 28 76 6f 69 64 29 28 58 29 2c 20 28 76 6f 69   (void)(X), (voi
09d0: 64 29 28 59 29 0a 23 65 6e 64 69 66 0a 0a 74 79  d)(Y).#endif..ty
09e0: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
09f0: 35 47 6c 6f 62 61 6c 20 46 74 73 35 47 6c 6f 62  5Global Fts5Glob
0a00: 61 6c 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75  al;.typedef stru
0a10: 63 74 20 46 74 73 35 43 6f 6c 73 65 74 20 46 74  ct Fts5Colset Ft
0a20: 73 35 43 6f 6c 73 65 74 3b 0a 0a 2f 2a 20 49 66  s5Colset;../* If
0a30: 20 61 20 4e 45 41 52 28 29 20 63 6c 75 6d 70 20   a NEAR() clump 
0a40: 6f 72 20 70 68 72 61 73 65 20 6d 61 79 20 6f 6e  or phrase may on
0a50: 6c 79 20 6d 61 74 63 68 20 61 20 73 70 65 63 69  ly match a speci
0a60: 66 69 63 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d  fic set of colum
0a70: 6e 73 2c 20 0a 2a 2a 20 74 68 65 6e 20 61 6e 20  ns, .** then an 
0a80: 6f 62 6a 65 63 74 20 6f 66 20 74 68 65 20 66 6f  object of the fo
0a90: 6c 6c 6f 77 69 6e 67 20 74 79 70 65 20 69 73 20  llowing type is 
0aa0: 75 73 65 64 20 74 6f 20 72 65 63 6f 72 64 20 74  used to record t
0ab0: 68 65 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d 6e  he set of column
0ac0: 73 2e 0a 2a 2a 20 45 61 63 68 20 65 6e 74 72 79  s..** Each entry
0ad0: 20 69 6e 20 74 68 65 20 61 69 43 6f 6c 5b 5d 20   in the aiCol[] 
0ae0: 61 72 72 61 79 20 69 73 20 61 20 63 6f 6c 75 6d  array is a colum
0af0: 6e 20 74 68 61 74 20 6d 61 79 20 62 65 20 6d 61  n that may be ma
0b00: 74 63 68 65 64 2e 0a 2a 2a 0a 2a 2a 20 54 68 69  tched..**.** Thi
0b10: 73 20 6f 62 6a 65 63 74 20 69 73 20 75 73 65 64  s object is used
0b20: 20 62 79 20 66 74 73 35 5f 65 78 70 72 2e 63 20   by fts5_expr.c 
0b30: 61 6e 64 20 66 74 73 35 5f 69 6e 64 65 78 2e 63  and fts5_index.c
0b40: 2e 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74 73 35  ..*/.struct Fts5
0b50: 43 6f 6c 73 65 74 20 7b 0a 20 20 69 6e 74 20 6e  Colset {.  int n
0b60: 43 6f 6c 3b 0a 20 20 69 6e 74 20 61 69 43 6f 6c  Col;.  int aiCol
0b70: 5b 31 5d 3b 0a 7d 3b 0a 0a 0a 0a 2f 2a 2a 2a 2a  [1];.};..../****
0b80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0b90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0ba0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bc0: 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66  ******.** Interf
0bd0: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
0be0: 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 20 66 74  ts5_config.c. ft
0bf0: 73 35 5f 63 6f 6e 66 69 67 2e 63 20 63 6f 6e 74  s5_config.c cont
0c00: 61 69 6e 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f  ains contains co
0c10: 64 65 0a 2a 2a 20 74 6f 20 70 61 72 73 65 20 74  de.** to parse t
0c20: 68 65 20 61 72 67 75 6d 65 6e 74 73 20 70 61 73  he arguments pas
0c30: 73 65 64 20 74 6f 20 74 68 65 20 43 52 45 41 54  sed to the CREAT
0c40: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20  E VIRTUAL TABLE 
0c50: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2f 0a 0a 74  statement..*/..t
0c60: 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74  ypedef struct Ft
0c70: 73 35 43 6f 6e 66 69 67 20 46 74 73 35 43 6f 6e  s5Config Fts5Con
0c80: 66 69 67 3b 0a 0a 2f 2a 0a 2a 2a 20 41 6e 20 69  fig;../*.** An i
0c90: 6e 73 74 61 6e 63 65 20 6f 66 20 74 68 65 20 66  nstance of the f
0ca0: 6f 6c 6c 6f 77 69 6e 67 20 73 74 72 75 63 74 75  ollowing structu
0cb0: 72 65 20 65 6e 63 6f 64 65 73 20 61 6c 6c 20 69  re encodes all i
0cc0: 6e 66 6f 72 6d 61 74 69 6f 6e 20 74 68 61 74 20  nformation that 
0cd0: 63 61 6e 0a 2a 2a 20 62 65 20 67 6c 65 61 6e 65  can.** be gleane
0ce0: 64 20 66 72 6f 6d 20 74 68 65 20 43 52 45 41 54  d from the CREAT
0cf0: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20  E VIRTUAL TABLE 
0d00: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2a 0a 2a 2a  statement..**.**
0d10: 20 41 6e 64 20 61 6c 6c 20 69 6e 66 6f 72 6d 61   And all informa
0d20: 74 69 6f 6e 20 6c 6f 61 64 65 64 20 66 72 6f 6d  tion loaded from
0d30: 20 74 68 65 20 25 5f 63 6f 6e 66 69 67 20 74 61   the %_config ta
0d40: 62 6c 65 2e 0a 2a 2a 0a 2a 2a 20 6e 41 75 74 6f  ble..**.** nAuto
0d50: 6d 65 72 67 65 3a 0a 2a 2a 20 20 20 54 68 65 20  merge:.**   The 
0d60: 6d 69 6e 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f  minimum number o
0d70: 66 20 73 65 67 6d 65 6e 74 73 20 74 68 61 74 20  f segments that 
0d80: 61 6e 20 61 75 74 6f 2d 6d 65 72 67 65 20 6f 70  an auto-merge op
0d90: 65 72 61 74 69 6f 6e 20 73 68 6f 75 6c 64 0a 2a  eration should.*
0da0: 2a 20 20 20 61 74 74 65 6d 70 74 20 74 6f 20 6d  *   attempt to m
0db0: 65 72 67 65 20 74 6f 67 65 74 68 65 72 2e 20 41  erge together. A
0dc0: 20 76 61 6c 75 65 20 6f 66 20 31 20 73 65 74 73   value of 1 sets
0dd0: 20 74 68 65 20 6f 62 6a 65 63 74 20 74 6f 20 75   the object to u
0de0: 73 65 20 74 68 65 20 0a 2a 2a 20 20 20 63 6f 6d  se the .**   com
0df0: 70 69 6c 65 20 74 69 6d 65 20 64 65 66 61 75 6c  pile time defaul
0e00: 74 2e 20 5a 65 72 6f 20 64 69 73 61 62 6c 65 73  t. Zero disables
0e10: 20 61 75 74 6f 2d 6d 65 72 67 65 20 61 6c 74 6f   auto-merge alto
0e20: 67 65 74 68 65 72 2e 0a 2a 2a 0a 2a 2a 20 7a 43  gether..**.** zC
0e30: 6f 6e 74 65 6e 74 3a 0a 2a 2a 0a 2a 2a 20 7a 43  ontent:.**.** zC
0e40: 6f 6e 74 65 6e 74 52 6f 77 69 64 3a 0a 2a 2a 20  ontentRowid:.** 
0e50: 20 20 54 68 65 20 76 61 6c 75 65 20 6f 66 20 74    The value of t
0e60: 68 65 20 63 6f 6e 74 65 6e 74 5f 72 6f 77 69 64  he content_rowid
0e70: 3d 20 6f 70 74 69 6f 6e 2c 20 69 66 20 6f 6e 65  = option, if one
0e80: 20 77 61 73 20 73 70 65 63 69 66 69 65 64 2e 20   was specified. 
0e90: 4f 72 20 0a 2a 2a 20 20 20 74 68 65 20 73 74 72  Or .**   the str
0ea0: 69 6e 67 20 22 72 6f 77 69 64 22 20 6f 74 68 65  ing "rowid" othe
0eb0: 72 77 69 73 65 2e 20 54 68 69 73 20 74 65 78 74  rwise. This text
0ec0: 20 69 73 20 6e 6f 74 20 71 75 6f 74 65 64 20 2d   is not quoted -
0ed0: 20 69 66 20 69 74 20 69 73 0a 2a 2a 20 20 20 75   if it is.**   u
0ee0: 73 65 64 20 61 73 20 70 61 72 74 20 6f 66 20 61  sed as part of a
0ef0: 6e 20 53 51 4c 20 73 74 61 74 65 6d 65 6e 74 20  n SQL statement 
0f00: 69 74 20 6e 65 65 64 73 20 74 6f 20 62 65 20 71  it needs to be q
0f10: 75 6f 74 65 64 20 61 70 70 72 6f 70 72 69 61 74  uoted appropriat
0f20: 65 6c 79 2e 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74  ely..**.** zCont
0f30: 65 6e 74 45 78 70 72 6c 69 73 74 3a 0a 2a 2a 0a  entExprlist:.**.
0f40: 2a 2a 20 70 7a 45 72 72 6d 73 67 3a 0a 2a 2a 20  ** pzErrmsg:.** 
0f50: 20 20 54 68 69 73 20 65 78 69 73 74 73 20 69 6e    This exists in
0f60: 20 6f 72 64 65 72 20 74 6f 20 61 6c 6c 6f 77 20   order to allow 
0f70: 74 68 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63  the fts5_index.c
0f80: 20 6d 6f 64 75 6c 65 20 74 6f 20 72 65 74 75 72   module to retur
0f90: 6e 20 61 20 0a 2a 2a 20 20 20 64 65 63 65 6e 74  n a .**   decent
0fa0: 20 65 72 72 6f 72 20 6d 65 73 73 61 67 65 20 69   error message i
0fb0: 66 20 69 74 20 65 6e 63 6f 75 6e 74 65 72 73 20  f it encounters 
0fc0: 61 20 66 69 6c 65 2d 66 6f 72 6d 61 74 20 76 65  a file-format ve
0fd0: 72 73 69 6f 6e 20 69 74 20 64 6f 65 73 0a 2a 2a  rsion it does.**
0fe0: 20 20 20 6e 6f 74 20 75 6e 64 65 72 73 74 61 6e     not understan
0ff0: 64 2e 0a 2a 2a 0a 2a 2a 20 62 43 6f 6c 75 6d 6e  d..**.** bColumn
1000: 73 69 7a 65 3a 0a 2a 2a 20 20 20 54 72 75 65 20  size:.**   True 
1010: 69 66 20 74 68 65 20 25 5f 64 6f 63 73 69 7a 65  if the %_docsize
1020: 20 74 61 62 6c 65 20 69 73 20 63 72 65 61 74 65   table is create
1030: 64 2e 0a 2a 2a 0a 2a 2a 20 62 50 72 65 66 69 78  d..**.** bPrefix
1040: 49 6e 64 65 78 3a 0a 2a 2a 20 20 20 54 68 69 73  Index:.**   This
1050: 20 69 73 20 6f 6e 6c 79 20 75 73 65 64 20 66 6f   is only used fo
1060: 72 20 64 65 62 75 67 67 69 6e 67 2e 20 49 66 20  r debugging. If 
1070: 73 65 74 20 74 6f 20 66 61 6c 73 65 2c 20 61 6e  set to false, an
1080: 79 20 70 72 65 66 69 78 20 69 6e 64 65 78 65 73  y prefix indexes
1090: 0a 2a 2a 20 20 20 61 72 65 20 69 67 6e 6f 72 65  .**   are ignore
10a0: 64 2e 20 54 68 69 73 20 76 61 6c 75 65 20 69 73  d. This value is
10b0: 20 63 6f 6e 66 69 67 75 72 65 64 20 75 73 69 6e   configured usin
10c0: 67 3a 0a 2a 2a 0a 2a 2a 20 20 20 20 20 20 20 49  g:.**.**       I
10d0: 4e 53 45 52 54 20 49 4e 54 4f 20 74 62 6c 28 74  NSERT INTO tbl(t
10e0: 62 6c 2c 20 72 61 6e 6b 29 20 56 41 4c 55 45 53  bl, rank) VALUES
10f0: 28 27 70 72 65 66 69 78 2d 69 6e 64 65 78 27 2c  ('prefix-index',
1100: 20 24 62 50 72 65 66 69 78 49 6e 64 65 78 29 3b   $bPrefixIndex);
1110: 0a 2a 2a 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74  .**.*/.struct Ft
1120: 73 35 43 6f 6e 66 69 67 20 7b 0a 20 20 73 71 6c  s5Config {.  sql
1130: 69 74 65 33 20 2a 64 62 3b 20 20 20 20 20 20 20  ite3 *db;       
1140: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1150: 44 61 74 61 62 61 73 65 20 68 61 6e 64 6c 65 20  Database handle 
1160: 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 44 62 3b 20  */.  char *zDb; 
1170: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1180: 20 20 20 20 20 2f 2a 20 44 61 74 61 62 61 73 65       /* Database
1190: 20 68 6f 6c 64 69 6e 67 20 46 54 53 20 69 6e 64   holding FTS ind
11a0: 65 78 20 28 65 2e 67 2e 20 22 6d 61 69 6e 22 29  ex (e.g. "main")
11b0: 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 4e 61 6d   */.  char *zNam
11c0: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
11d0: 20 20 20 20 20 20 2f 2a 20 4e 61 6d 65 20 6f 66        /* Name of
11e0: 20 46 54 53 20 69 6e 64 65 78 20 2a 2f 0a 20 20   FTS index */.  
11f0: 69 6e 74 20 6e 43 6f 6c 3b 20 20 20 20 20 20 20  int nCol;       
1200: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1210: 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 63 6f 6c  /* Number of col
1220: 75 6d 6e 73 20 2a 2f 0a 20 20 63 68 61 72 20 2a  umns */.  char *
1230: 2a 61 7a 43 6f 6c 3b 20 20 20 20 20 20 20 20 20  *azCol;         
1240: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c            /* Col
1250: 75 6d 6e 20 6e 61 6d 65 73 20 2a 2f 0a 20 20 75  umn names */.  u
1260: 38 20 2a 61 62 55 6e 69 6e 64 65 78 65 64 3b 20  8 *abUnindexed; 
1270: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
1280: 2a 20 54 72 75 65 20 66 6f 72 20 75 6e 69 6e 64  * True for unind
1290: 65 78 65 64 20 63 6f 6c 75 6d 6e 73 20 2a 2f 0a  exed columns */.
12a0: 20 20 69 6e 74 20 6e 50 72 65 66 69 78 3b 20 20    int nPrefix;  
12b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
12c0: 20 20 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 70    /* Number of p
12d0: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a 2f  refix indexes */
12e0: 0a 20 20 69 6e 74 20 2a 61 50 72 65 66 69 78 3b  .  int *aPrefix;
12f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1300: 20 20 20 2f 2a 20 53 69 7a 65 73 20 69 6e 20 62     /* Sizes in b
1310: 79 74 65 73 20 6f 66 20 6e 50 72 65 66 69 78 20  ytes of nPrefix 
1320: 70 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a  prefix indexes *
1330: 2f 0a 20 20 69 6e 74 20 65 43 6f 6e 74 65 6e 74  /.  int eContent
1340: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1350: 20 20 20 20 2f 2a 20 41 6e 20 46 54 53 35 5f 43      /* An FTS5_C
1360: 4f 4e 54 45 4e 54 20 76 61 6c 75 65 20 2a 2f 0a  ONTENT value */.
1370: 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74 65 6e 74    char *zContent
1380: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1390: 20 20 2f 2a 20 63 6f 6e 74 65 6e 74 20 74 61 62    /* content tab
13a0: 6c 65 20 2a 2f 20 0a 20 20 63 68 61 72 20 2a 7a  le */ .  char *z
13b0: 43 6f 6e 74 65 6e 74 52 6f 77 69 64 3b 20 20 20  ContentRowid;   
13c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 22 63 6f 6e           /* "con
13d0: 74 65 6e 74 5f 72 6f 77 69 64 3d 22 20 6f 70 74  tent_rowid=" opt
13e0: 69 6f 6e 20 76 61 6c 75 65 20 2a 2f 20 0a 20 20  ion value */ .  
13f0: 69 6e 74 20 62 43 6f 6c 75 6d 6e 73 69 7a 65 3b  int bColumnsize;
1400: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1410: 2f 2a 20 22 63 6f 6c 75 6d 6e 73 69 7a 65 3d 22  /* "columnsize="
1420: 20 6f 70 74 69 6f 6e 20 76 61 6c 75 65 20 28 64   option value (d
1430: 66 6c 74 3d 3d 31 29 20 2a 2f 0a 20 20 69 6e 74  flt==1) */.  int
1440: 20 65 44 65 74 61 69 6c 3b 20 20 20 20 20 20 20   eDetail;       
1450: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1460: 46 54 53 35 5f 44 45 54 41 49 4c 5f 58 58 58 20  FTS5_DETAIL_XXX 
1470: 76 61 6c 75 65 20 2a 2f 0a 20 20 63 68 61 72 20  value */.  char 
1480: 2a 7a 43 6f 6e 74 65 6e 74 45 78 70 72 6c 69 73  *zContentExprlis
1490: 74 3b 0a 20 20 46 74 73 35 54 6f 6b 65 6e 69 7a  t;.  Fts5Tokeniz
14a0: 65 72 20 2a 70 54 6f 6b 3b 0a 20 20 66 74 73 35  er *pTok;.  fts5
14b0: 5f 74 6f 6b 65 6e 69 7a 65 72 20 2a 70 54 6f 6b  _tokenizer *pTok
14c0: 41 70 69 3b 0a 0a 20 20 2f 2a 20 56 61 6c 75 65  Api;..  /* Value
14d0: 73 20 6c 6f 61 64 65 64 20 66 72 6f 6d 20 74 68  s loaded from th
14e0: 65 20 25 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65  e %_config table
14f0: 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f 6f 6b 69   */.  int iCooki
1500: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
1510: 20 20 20 20 20 20 2f 2a 20 49 6e 63 72 65 6d 65        /* Increme
1520: 6e 74 65 64 20 77 68 65 6e 20 25 5f 63 6f 6e 66  nted when %_conf
1530: 69 67 20 69 73 20 6d 6f 64 69 66 69 65 64 20 2a  ig is modified *
1540: 2f 0a 20 20 69 6e 74 20 70 67 73 7a 3b 20 20 20  /.  int pgsz;   
1550: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1560: 20 20 20 20 2f 2a 20 41 70 70 72 6f 78 69 6d 61      /* Approxima
1570: 74 65 20 70 61 67 65 20 73 69 7a 65 20 75 73 65  te page size use
1580: 64 20 69 6e 20 25 5f 64 61 74 61 20 2a 2f 0a 20  d in %_data */. 
1590: 20 69 6e 74 20 6e 41 75 74 6f 6d 65 72 67 65 3b   int nAutomerge;
15a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
15b0: 20 2f 2a 20 27 61 75 74 6f 6d 65 72 67 65 27 20   /* 'automerge' 
15c0: 73 65 74 74 69 6e 67 20 2a 2f 0a 20 20 69 6e 74  setting */.  int
15d0: 20 6e 43 72 69 73 69 73 4d 65 72 67 65 3b 20 20   nCrisisMerge;  
15e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
15f0: 4d 61 78 69 6d 75 6d 20 61 6c 6c 6f 77 65 64 20  Maximum allowed 
1600: 73 65 67 6d 65 6e 74 73 20 70 65 72 20 6c 65 76  segments per lev
1610: 65 6c 20 2a 2f 0a 20 20 69 6e 74 20 6e 55 73 65  el */.  int nUse
1620: 72 6d 65 72 67 65 3b 20 20 20 20 20 20 20 20 20  rmerge;         
1630: 20 20 20 20 20 20 20 20 2f 2a 20 27 75 73 65 72          /* 'user
1640: 6d 65 72 67 65 27 20 73 65 74 74 69 6e 67 20 2a  merge' setting *
1650: 2f 0a 20 20 69 6e 74 20 6e 48 61 73 68 53 69 7a  /.  int nHashSiz
1660: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
1670: 20 20 20 20 2f 2a 20 42 79 74 65 73 20 6f 66 20      /* Bytes of 
1680: 6d 65 6d 6f 72 79 20 66 6f 72 20 69 6e 2d 6d 65  memory for in-me
1690: 6d 6f 72 79 20 68 61 73 68 20 2a 2f 0a 20 20 63  mory hash */.  c
16a0: 68 61 72 20 2a 7a 52 61 6e 6b 3b 20 20 20 20 20  har *zRank;     
16b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
16c0: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 66  * Name of rank f
16d0: 75 6e 63 74 69 6f 6e 20 2a 2f 0a 20 20 63 68 61  unction */.  cha
16e0: 72 20 2a 7a 52 61 6e 6b 41 72 67 73 3b 20 20 20  r *zRankArgs;   
16f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1700: 41 72 67 75 6d 65 6e 74 73 20 74 6f 20 72 61 6e  Arguments to ran
1710: 6b 20 66 75 6e 63 74 69 6f 6e 20 2a 2f 0a 0a 20  k function */.. 
1720: 20 2f 2a 20 49 66 20 6e 6f 6e 2d 4e 55 4c 4c 2c   /* If non-NULL,
1730: 20 70 6f 69 6e 74 73 20 74 6f 20 73 71 6c 69 74   points to sqlit
1740: 65 33 5f 76 74 61 62 2e 62 61 73 65 2e 7a 45 72  e3_vtab.base.zEr
1750: 72 6d 73 67 2e 20 4f 66 74 65 6e 20 4e 55 4c 4c  rmsg. Often NULL
1760: 2e 20 2a 2f 0a 20 20 63 68 61 72 20 2a 2a 70 7a  . */.  char **pz
1770: 45 72 72 6d 73 67 3b 0a 0a 23 69 66 64 65 66 20  Errmsg;..#ifdef 
1780: 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 20 20 69  SQLITE_DEBUG.  i
1790: 6e 74 20 62 50 72 65 66 69 78 49 6e 64 65 78 3b  nt bPrefixIndex;
17a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
17b0: 2a 20 54 72 75 65 20 74 6f 20 75 73 65 20 70 72  * True to use pr
17c0: 65 66 69 78 2d 69 6e 64 65 78 65 73 20 2a 2f 0a  efix-indexes */.
17d0: 23 65 6e 64 69 66 0a 7d 3b 0a 0a 2f 2a 20 43 75  #endif.};../* Cu
17e0: 72 72 65 6e 74 20 65 78 70 65 63 74 65 64 20 76  rrent expected v
17f0: 61 6c 75 65 20 6f 66 20 25 5f 63 6f 6e 66 69 67  alue of %_config
1800: 20 74 61 62 6c 65 20 27 76 65 72 73 69 6f 6e 27   table 'version'
1810: 20 66 69 65 6c 64 20 2a 2f 0a 23 64 65 66 69 6e   field */.#defin
1820: 65 20 46 54 53 35 5f 43 55 52 52 45 4e 54 5f 56  e FTS5_CURRENT_V
1830: 45 52 53 49 4f 4e 20 34 0a 0a 23 64 65 66 69 6e  ERSION 4..#defin
1840: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e  e FTS5_CONTENT_N
1850: 4f 52 4d 41 4c 20 20 20 30 0a 23 64 65 66 69 6e  ORMAL   0.#defin
1860: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e  e FTS5_CONTENT_N
1870: 4f 4e 45 20 20 20 20 20 31 0a 23 64 65 66 69 6e  ONE     1.#defin
1880: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 45  e FTS5_CONTENT_E
1890: 58 54 45 52 4e 41 4c 20 32 0a 0a 23 64 65 66 69  XTERNAL 2..#defi
18a0: 6e 65 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 46  ne FTS5_DETAIL_F
18b0: 55 4c 4c 20 20 20 20 30 0a 23 64 65 66 69 6e 65  ULL    0.#define
18c0: 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 4e 4f 4e   FTS5_DETAIL_NON
18d0: 45 20 20 20 20 31 0a 23 64 65 66 69 6e 65 20 46  E    1.#define F
18e0: 54 53 35 5f 44 45 54 41 49 4c 5f 43 4f 4c 55 4d  TS5_DETAIL_COLUM
18f0: 4e 53 20 32 0a 0a 0a 0a 69 6e 74 20 73 71 6c 69  NS 2....int sqli
1900: 74 65 33 46 74 73 35 43 6f 6e 66 69 67 50 61 72  te3Fts5ConfigPar
1910: 73 65 28 0a 20 20 20 20 46 74 73 35 47 6c 6f 62  se(.    Fts5Glob
1920: 61 6c 2a 2c 20 73 71 6c 69 74 65 33 2a 2c 20 69  al*, sqlite3*, i
1930: 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  nt, const char *
1940: 2a 2c 20 46 74 73 35 43 6f 6e 66 69 67 2a 2a 2c  *, Fts5Config**,
1950: 20 63 68 61 72 2a 2a 0a 29 3b 0a 76 6f 69 64 20   char**.);.void 
1960: 73 71 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69  sqlite3Fts5Confi
1970: 67 46 72 65 65 28 46 74 73 35 43 6f 6e 66 69 67  gFree(Fts5Config
1980: 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  *);..int sqlite3
1990: 46 74 73 35 43 6f 6e 66 69 67 44 65 63 6c 61 72  Fts5ConfigDeclar
19a0: 65 56 74 61 62 28 46 74 73 35 43 6f 6e 66 69 67  eVtab(Fts5Config
19b0: 20 2a 70 43 6f 6e 66 69 67 29 3b 0a 0a 69 6e 74   *pConfig);..int
19c0: 20 73 71 6c 69 74 65 33 46 74 73 35 54 6f 6b 65   sqlite3Fts5Toke
19d0: 6e 69 7a 65 28 0a 20 20 46 74 73 35 43 6f 6e 66  nize(.  Fts5Conf
19e0: 69 67 20 2a 70 43 6f 6e 66 69 67 2c 20 20 20 20  ig *pConfig,    
19f0: 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53 35 20          /* FTS5 
1a00: 43 6f 6e 66 69 67 75 72 61 74 69 6f 6e 20 6f 62  Configuration ob
1a10: 6a 65 63 74 20 2a 2f 0a 20 20 69 6e 74 20 66 6c  ject */.  int fl
1a20: 61 67 73 2c 20 20 20 20 20 20 20 20 20 20 20 20  ags,            
1a30: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53            /* FTS
1a40: 35 5f 54 4f 4b 45 4e 49 5a 45 5f 2a 20 66 6c 61  5_TOKENIZE_* fla
1a50: 67 73 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68  gs */.  const ch
1a60: 61 72 20 2a 70 54 65 78 74 2c 20 69 6e 74 20 6e  ar *pText, int n
1a70: 54 65 78 74 2c 20 20 20 2f 2a 20 54 65 78 74 20  Text,   /* Text 
1a80: 74 6f 20 74 6f 6b 65 6e 69 7a 65 20 2a 2f 0a 20  to tokenize */. 
1a90: 20 76 6f 69 64 20 2a 70 43 74 78 2c 20 20 20 20   void *pCtx,    
1aa0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1ab0: 20 2f 2a 20 43 6f 6e 74 65 78 74 20 70 61 73 73   /* Context pass
1ac0: 65 64 20 74 6f 20 78 54 6f 6b 65 6e 28 29 20 2a  ed to xToken() *
1ad0: 2f 0a 20 20 69 6e 74 20 28 2a 78 54 6f 6b 65 6e  /.  int (*xToken
1ae0: 29 28 76 6f 69 64 2a 2c 20 69 6e 74 2c 20 63 6f  )(void*, int, co
1af0: 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20  nst char*, int, 
1b00: 69 6e 74 2c 20 69 6e 74 29 20 20 20 20 2f 2a 20  int, int)    /* 
1b10: 43 61 6c 6c 62 61 63 6b 20 2a 2f 0a 29 3b 0a 0a  Callback */.);..
1b20: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
1b30: 44 65 71 75 6f 74 65 28 63 68 61 72 20 2a 7a 29  Dequote(char *z)
1b40: 3b 0a 0a 2f 2a 20 4c 6f 61 64 20 74 68 65 20 63  ;../* Load the c
1b50: 6f 6e 74 65 6e 74 73 20 6f 66 20 74 68 65 20 25  ontents of the %
1b60: 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 20 2a 2f  _config table */
1b70: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
1b80: 43 6f 6e 66 69 67 4c 6f 61 64 28 46 74 73 35 43  ConfigLoad(Fts5C
1b90: 6f 6e 66 69 67 2a 2c 20 69 6e 74 29 3b 0a 0a 2f  onfig*, int);../
1ba0: 2a 20 53 65 74 20 74 68 65 20 76 61 6c 75 65 20  * Set the value 
1bb0: 6f 66 20 61 20 73 69 6e 67 6c 65 20 63 6f 6e 66  of a single conf
1bc0: 69 67 20 61 74 74 72 69 62 75 74 65 20 2a 2f 0a  ig attribute */.
1bd0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43  int sqlite3Fts5C
1be0: 6f 6e 66 69 67 53 65 74 56 61 6c 75 65 28 46 74  onfigSetValue(Ft
1bf0: 73 35 43 6f 6e 66 69 67 2a 2c 20 63 6f 6e 73 74  s5Config*, const
1c00: 20 63 68 61 72 2a 2c 20 73 71 6c 69 74 65 33 5f   char*, sqlite3_
1c10: 76 61 6c 75 65 2a 2c 20 69 6e 74 2a 29 3b 0a 0a  value*, int*);..
1c20: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43  int sqlite3Fts5C
1c30: 6f 6e 66 69 67 50 61 72 73 65 52 61 6e 6b 28 63  onfigParseRank(c
1c40: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 63 68 61 72  onst char*, char
1c50: 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 0a 2f 2a  **, char**);../*
1c60: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
1c70: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
1c80: 66 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 0a 2a  fts5_config.c..*
1c90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1ca0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a  *********/../***
1ce0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cf0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d20: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72  *******.** Inter
1d30: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
1d40: 66 74 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a  fts5_buffer.c..*
1d50: 2f 0a 0a 2f 2a 0a 2a 2a 20 42 75 66 66 65 72 20  /../*.** Buffer 
1d60: 6f 62 6a 65 63 74 20 66 6f 72 20 74 68 65 20 69  object for the i
1d70: 6e 63 72 65 6d 65 6e 74 61 6c 20 62 75 69 6c 64  ncremental build
1d80: 69 6e 67 20 6f 66 20 73 74 72 69 6e 67 20 64 61  ing of string da
1d90: 74 61 2e 0a 2a 2f 0a 74 79 70 65 64 65 66 20 73  ta..*/.typedef s
1da0: 74 72 75 63 74 20 46 74 73 35 42 75 66 66 65 72  truct Fts5Buffer
1db0: 20 46 74 73 35 42 75 66 66 65 72 3b 0a 73 74 72   Fts5Buffer;.str
1dc0: 75 63 74 20 46 74 73 35 42 75 66 66 65 72 20 7b  uct Fts5Buffer {
1dd0: 0a 20 20 75 38 20 2a 70 3b 0a 20 20 69 6e 74 20  .  u8 *p;.  int 
1de0: 6e 3b 0a 20 20 69 6e 74 20 6e 53 70 61 63 65 3b  n;.  int nSpace;
1df0: 0a 7d 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .};..int sqlite3
1e00: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 69  Fts5BufferSize(i
1e10: 6e 74 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a  nt*, Fts5Buffer*
1e20: 2c 20 75 33 32 29 3b 0a 76 6f 69 64 20 73 71 6c  , u32);.void sql
1e30: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
1e40: 70 65 6e 64 56 61 72 69 6e 74 28 69 6e 74 2a 2c  pendVarint(int*,
1e50: 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 36   Fts5Buffer*, i6
1e60: 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  4);.void sqlite3
1e70: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64  Fts5BufferAppend
1e80: 42 6c 6f 62 28 69 6e 74 2a 2c 20 46 74 73 35 42  Blob(int*, Fts5B
1e90: 75 66 66 65 72 2a 2c 20 75 33 32 2c 20 63 6f 6e  uffer*, u32, con
1ea0: 73 74 20 75 38 2a 29 3b 0a 76 6f 69 64 20 73 71  st u8*);.void sq
1eb0: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41  lite3Fts5BufferA
1ec0: 70 70 65 6e 64 53 74 72 69 6e 67 28 69 6e 74 20  ppendString(int 
1ed0: 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20  *, Fts5Buffer*, 
1ee0: 63 6f 6e 73 74 20 63 68 61 72 2a 29 3b 0a 76 6f  const char*);.vo
1ef0: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1f00: 66 66 65 72 46 72 65 65 28 46 74 73 35 42 75 66  fferFree(Fts5Buf
1f10: 66 65 72 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69  fer*);.void sqli
1f20: 74 65 33 46 74 73 35 42 75 66 66 65 72 5a 65 72  te3Fts5BufferZer
1f30: 6f 28 46 74 73 35 42 75 66 66 65 72 2a 29 3b 0a  o(Fts5Buffer*);.
1f40: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
1f50: 42 75 66 66 65 72 53 65 74 28 69 6e 74 2a 2c 20  BufferSet(int*, 
1f60: 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 6e 74  Fts5Buffer*, int
1f70: 2c 20 63 6f 6e 73 74 20 75 38 2a 29 3b 0a 76 6f  , const u8*);.vo
1f80: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1f90: 66 66 65 72 41 70 70 65 6e 64 50 72 69 6e 74 66  fferAppendPrintf
1fa0: 28 69 6e 74 20 2a 2c 20 46 74 73 35 42 75 66 66  (int *, Fts5Buff
1fb0: 65 72 2a 2c 20 63 68 61 72 20 2a 7a 46 6d 74 2c  er*, char *zFmt,
1fc0: 20 2e 2e 2e 29 3b 0a 0a 63 68 61 72 20 2a 73 71   ...);..char *sq
1fd0: 6c 69 74 65 33 46 74 73 35 4d 70 72 69 6e 74 66  lite3Fts5Mprintf
1fe0: 28 69 6e 74 20 2a 70 52 63 2c 20 63 6f 6e 73 74  (int *pRc, const
1ff0: 20 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e   char *zFmt, ...
2000: 29 3b 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 35  );..#define fts5
2010: 42 75 66 66 65 72 5a 65 72 6f 28 78 29 20 20 20  BufferZero(x)   
2020: 20 20 20 20 20 20 20 20 20 20 73 71 6c 69 74 65            sqlite
2030: 33 46 74 73 35 42 75 66 66 65 72 5a 65 72 6f 28  3Fts5BufferZero(
2040: 78 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 42  x).#define fts5B
2050: 75 66 66 65 72 41 70 70 65 6e 64 56 61 72 69 6e  ufferAppendVarin
2060: 74 28 61 2c 62 2c 63 29 20 73 71 6c 69 74 65 33  t(a,b,c) sqlite3
2070: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64  Fts5BufferAppend
2080: 56 61 72 69 6e 74 28 61 2c 62 2c 63 29 0a 23 64  Varint(a,b,c).#d
2090: 65 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72  efine fts5Buffer
20a0: 46 72 65 65 28 61 29 20 20 20 20 20 20 20 20 20  Free(a)         
20b0: 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42      sqlite3Fts5B
20c0: 75 66 66 65 72 46 72 65 65 28 61 29 0a 23 64 65  ufferFree(a).#de
20d0: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 41  fine fts5BufferA
20e0: 70 70 65 6e 64 42 6c 6f 62 28 61 2c 62 2c 63 2c  ppendBlob(a,b,c,
20f0: 64 29 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  d) sqlite3Fts5Bu
2100: 66 66 65 72 41 70 70 65 6e 64 42 6c 6f 62 28 61  fferAppendBlob(a
2110: 2c 62 2c 63 2c 64 29 0a 23 64 65 66 69 6e 65 20  ,b,c,d).#define 
2120: 66 74 73 35 42 75 66 66 65 72 53 65 74 28 61 2c  fts5BufferSet(a,
2130: 62 2c 63 2c 64 29 20 20 20 20 20 20 20 20 73 71  b,c,d)        sq
2140: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 53  lite3Fts5BufferS
2150: 65 74 28 61 2c 62 2c 63 2c 64 29 0a 0a 23 64 65  et(a,b,c,d)..#de
2160: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 47  fine fts5BufferG
2170: 72 6f 77 28 70 52 63 2c 70 42 75 66 2c 6e 6e 29  row(pRc,pBuf,nn)
2180: 20 28 20 5c 0a 20 20 28 75 33 32 29 28 28 70 42   ( \.  (u32)((pB
2190: 75 66 29 2d 3e 6e 29 20 2b 20 28 75 33 32 29 28  uf)->n) + (u32)(
21a0: 6e 6e 29 20 3c 3d 20 28 75 33 32 29 28 28 70 42  nn) <= (u32)((pB
21b0: 75 66 29 2d 3e 6e 53 70 61 63 65 29 20 3f 20 30  uf)->nSpace) ? 0
21c0: 20 3a 20 5c 0a 20 20 20 20 73 71 6c 69 74 65 33   : \.    sqlite3
21d0: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 28  Fts5BufferSize((
21e0: 70 52 63 29 2c 28 70 42 75 66 29 2c 28 6e 6e 29  pRc),(pBuf),(nn)
21f0: 2b 28 70 42 75 66 29 2d 3e 6e 29 20 5c 0a 29 0a  +(pBuf)->n) \.).
2200: 0a 2f 2a 20 57 72 69 74 65 20 61 6e 64 20 64 65  ./* Write and de
2210: 63 6f 64 65 20 62 69 67 2d 65 6e 64 69 61 6e 20  code big-endian 
2220: 33 32 2d 62 69 74 20 69 6e 74 65 67 65 72 20 76  32-bit integer v
2230: 61 6c 75 65 73 20 2a 2f 0a 76 6f 69 64 20 73 71  alues */.void sq
2240: 6c 69 74 65 33 46 74 73 35 50 75 74 33 32 28 75  lite3Fts5Put32(u
2250: 38 2a 2c 20 69 6e 74 29 3b 0a 69 6e 74 20 73 71  8*, int);.int sq
2260: 6c 69 74 65 33 46 74 73 35 47 65 74 33 32 28 63  lite3Fts5Get32(c
2270: 6f 6e 73 74 20 75 38 2a 29 3b 0a 0a 23 64 65 66  onst u8*);..#def
2280: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 43 4f 4c  ine FTS5_POS2COL
2290: 55 4d 4e 28 69 50 6f 73 29 20 28 69 6e 74 29 28  UMN(iPos) (int)(
22a0: 69 50 6f 73 20 3e 3e 20 33 32 29 0a 23 64 65 66  iPos >> 32).#def
22b0: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 4f 46 46  ine FTS5_POS2OFF
22c0: 53 45 54 28 69 50 6f 73 29 20 28 69 6e 74 29 28  SET(iPos) (int)(
22d0: 69 50 6f 73 20 26 20 30 78 46 46 46 46 46 46 46  iPos & 0xFFFFFFF
22e0: 46 29 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75  F)..typedef stru
22f0: 63 74 20 46 74 73 35 50 6f 73 6c 69 73 74 52 65  ct Fts5PoslistRe
2300: 61 64 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74  ader Fts5Poslist
2310: 52 65 61 64 65 72 3b 0a 73 74 72 75 63 74 20 46  Reader;.struct F
2320: 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72  ts5PoslistReader
2330: 20 7b 0a 20 20 2f 2a 20 56 61 72 69 61 62 6c 65   {.  /* Variable
2340: 73 20 75 73 65 64 20 6f 6e 6c 79 20 62 79 20 73  s used only by s
2350: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
2360: 74 49 74 65 72 58 58 58 28 29 20 66 75 6e 63 74  tIterXXX() funct
2370: 69 6f 6e 73 2e 20 2a 2f 0a 20 20 63 6f 6e 73 74  ions. */.  const
2380: 20 75 38 20 2a 61 3b 20 20 20 20 20 20 20 20 20   u8 *a;         
2390: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f             /* Po
23a0: 73 69 74 69 6f 6e 20 6c 69 73 74 20 74 6f 20 69  sition list to i
23b0: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a  terate through *
23c0: 2f 0a 20 20 69 6e 74 20 6e 3b 20 20 20 20 20 20  /.  int n;      
23d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
23e0: 20 20 20 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62      /* Size of b
23f0: 75 66 66 65 72 20 61 74 20 61 5b 5d 20 69 6e 20  uffer at a[] in 
2400: 62 79 74 65 73 20 2a 2f 0a 20 20 69 6e 74 20 69  bytes */.  int i
2410: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
2420: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 75             /* Cu
2430: 72 72 65 6e 74 20 6f 66 66 73 65 74 20 69 6e 20  rrent offset in 
2440: 61 5b 5d 20 2a 2f 0a 0a 20 20 75 38 20 62 46 6c  a[] */..  u8 bFl
2450: 61 67 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  ag;             
2460: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 6f 72            /* For
2470: 20 63 6c 69 65 6e 74 20 75 73 65 20 28 61 6e 79   client use (any
2480: 20 63 75 73 74 6f 6d 20 70 75 72 70 6f 73 65 29   custom purpose)
2490: 20 2a 2f 0a 0a 20 20 2f 2a 20 4f 75 74 70 75 74   */..  /* Output
24a0: 20 76 61 72 69 61 62 6c 65 73 20 2a 2f 0a 20 20   variables */.  
24b0: 75 38 20 62 45 6f 66 3b 20 20 20 20 20 20 20 20  u8 bEof;        
24c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
24d0: 2f 2a 20 53 65 74 20 74 6f 20 74 72 75 65 20 61  /* Set to true a
24e0: 74 20 45 4f 46 20 2a 2f 0a 20 20 69 36 34 20 69  t EOF */.  i64 i
24f0: 50 6f 73 3b 20 20 20 20 20 20 20 20 20 20 20 20  Pos;            
2500: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 28 69             /* (i
2510: 43 6f 6c 3c 3c 33 32 29 20 2b 20 69 50 6f 73 20  Col<<32) + iPos 
2520: 2a 2f 0a 7d 3b 0a 69 6e 74 20 73 71 6c 69 74 65  */.};.int sqlite
2530: 33 46 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64  3Fts5PoslistRead
2540: 65 72 49 6e 69 74 28 0a 20 20 63 6f 6e 73 74 20  erInit(.  const 
2550: 75 38 20 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20  u8 *a, int n,   
2560: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73            /* Pos
2570: 6c 69 73 74 20 62 75 66 66 65 72 20 74 6f 20 69  list buffer to i
2580: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a  terate through *
2590: 2f 0a 20 20 46 74 73 35 50 6f 73 6c 69 73 74 52  /.  Fts5PoslistR
25a0: 65 61 64 65 72 20 2a 70 49 74 65 72 20 20 20 20  eader *pIter    
25b0: 20 20 20 20 2f 2a 20 49 74 65 72 61 74 6f 72 20      /* Iterator 
25c0: 6f 62 6a 65 63 74 20 74 6f 20 69 6e 69 74 69 61  object to initia
25d0: 6c 69 7a 65 20 2a 2f 0a 29 3b 0a 69 6e 74 20 73  lize */.);.int s
25e0: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
25f0: 74 52 65 61 64 65 72 4e 65 78 74 28 46 74 73 35  tReaderNext(Fts5
2600: 50 6f 73 6c 69 73 74 52 65 61 64 65 72 2a 29 3b  PoslistReader*);
2610: 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74  ..typedef struct
2620: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74   Fts5PoslistWrit
2630: 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72  er Fts5PoslistWr
2640: 69 74 65 72 3b 0a 73 74 72 75 63 74 20 46 74 73  iter;.struct Fts
2650: 35 50 6f 73 6c 69 73 74 57 72 69 74 65 72 20 7b  5PoslistWriter {
2660: 0a 20 20 69 36 34 20 69 50 72 65 76 3b 0a 7d 3b  .  i64 iPrev;.};
2670: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
2680: 50 6f 73 6c 69 73 74 57 72 69 74 65 72 41 70 70  PoslistWriterApp
2690: 65 6e 64 28 46 74 73 35 42 75 66 66 65 72 2a 2c  end(Fts5Buffer*,
26a0: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74   Fts5PoslistWrit
26b0: 65 72 2a 2c 20 69 36 34 29 3b 0a 76 6f 69 64 20  er*, i64);.void 
26c0: 73 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69  sqlite3Fts5Posli
26d0: 73 74 53 61 66 65 41 70 70 65 6e 64 28 46 74 73  stSafeAppend(Fts
26e0: 35 42 75 66 66 65 72 2a 2c 20 69 36 34 2a 2c 20  5Buffer*, i64*, 
26f0: 69 36 34 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  i64);..int sqlit
2700: 65 33 46 74 73 35 50 6f 73 6c 69 73 74 4e 65 78  e3Fts5PoslistNex
2710: 74 36 34 28 0a 20 20 63 6f 6e 73 74 20 75 38 20  t64(.  const u8 
2720: 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20 20 20 20  *a, int n,      
2730: 20 20 20 20 20 20 20 2f 2a 20 42 75 66 66 65 72         /* Buffer
2740: 20 63 6f 6e 74 61 69 6e 69 6e 67 20 70 6f 73 6c   containing posl
2750: 69 73 74 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 69  ist */.  int *pi
2760: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
2770: 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e 2f 4f           /* IN/O
2780: 55 54 3a 20 4f 66 66 73 65 74 20 77 69 74 68 69  UT: Offset withi
2790: 6e 20 61 5b 5d 20 2a 2f 0a 20 20 69 36 34 20 2a  n a[] */.  i64 *
27a0: 70 69 4f 66 66 20 20 20 20 20 20 20 20 20 20 20  piOff           
27b0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e             /* IN
27c0: 2f 4f 55 54 3a 20 43 75 72 72 65 6e 74 20 6f 66  /OUT: Current of
27d0: 66 73 65 74 20 2a 2f 0a 29 3b 0a 0a 2f 2a 20 4d  fset */.);../* M
27e0: 61 6c 6c 6f 63 20 75 74 69 6c 69 74 79 20 2a 2f  alloc utility */
27f0: 0a 76 6f 69 64 20 2a 73 71 6c 69 74 65 33 46 74  .void *sqlite3Ft
2800: 73 35 4d 61 6c 6c 6f 63 5a 65 72 6f 28 69 6e 74  s5MallocZero(int
2810: 20 2a 70 52 63 2c 20 69 6e 74 20 6e 42 79 74 65   *pRc, int nByte
2820: 29 3b 0a 63 68 61 72 20 2a 73 71 6c 69 74 65 33  );.char *sqlite3
2830: 46 74 73 35 53 74 72 6e 64 75 70 28 69 6e 74 20  Fts5Strndup(int 
2840: 2a 70 52 63 2c 20 63 6f 6e 73 74 20 63 68 61 72  *pRc, const char
2850: 20 2a 70 49 6e 2c 20 69 6e 74 20 6e 49 6e 29 3b   *pIn, int nIn);
2860: 0a 0a 2f 2a 20 43 68 61 72 61 63 74 65 72 20 73  ../* Character s
2870: 65 74 20 74 65 73 74 73 20 28 6c 69 6b 65 20 69  et tests (like i
2880: 73 73 70 61 63 65 28 29 2c 20 69 73 61 6c 70 68  sspace(), isalph
2890: 61 28 29 20 65 74 63 2e 29 20 2a 2f 0a 69 6e 74  a() etc.) */.int
28a0: 20 73 71 6c 69 74 65 33 46 74 73 35 49 73 42 61   sqlite3Fts5IsBa
28b0: 72 65 77 6f 72 64 28 63 68 61 72 20 74 29 3b 0a  reword(char t);.
28c0: 0a 0a 2f 2a 20 42 75 63 6b 65 74 20 6f 66 20 74  ../* Bucket of t
28d0: 65 72 6d 73 20 6f 62 6a 65 63 74 20 75 73 65 64  erms object used
28e0: 20 62 79 20 74 68 65 20 69 6e 74 65 67 72 69 74   by the integrit
28f0: 79 2d 63 68 65 63 6b 20 69 6e 20 6f 66 66 73 65  y-check in offse
2900: 74 73 3d 30 20 6d 6f 64 65 2e 20 2a 2f 0a 74 79  ts=0 mode. */.ty
2910: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
2920: 35 54 65 72 6d 73 65 74 20 46 74 73 35 54 65 72  5Termset Fts5Ter
2930: 6d 73 65 74 3b 0a 69 6e 74 20 73 71 6c 69 74 65  mset;.int sqlite
2940: 33 46 74 73 35 54 65 72 6d 73 65 74 4e 65 77 28  3Fts5TermsetNew(
2950: 46 74 73 35 54 65 72 6d 73 65 74 2a 2a 29 3b 0a  Fts5Termset**);.
2960: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 54  int sqlite3Fts5T
2970: 65 72 6d 73 65 74 41 64 64 28 46 74 73 35 54 65  ermsetAdd(Fts5Te
2980: 72 6d 73 65 74 2a 2c 20 69 6e 74 2c 20 63 6f 6e  rmset*, int, con
2990: 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20 69  st char*, int, i
29a0: 6e 74 20 2a 70 62 50 72 65 73 65 6e 74 29 3b 0a  nt *pbPresent);.
29b0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
29c0: 54 65 72 6d 73 65 74 46 72 65 65 28 46 74 73 35  TermsetFree(Fts5
29d0: 54 65 72 6d 73 65 74 2a 29 3b 0a 0a 2f 2a 0a 2a  Termset*);../*.*
29e0: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61  * End of interfa
29f0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
2a00: 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a 2a 2a  s5_buffer.c..***
2a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a50: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
2a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2aa0: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
2ab0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
2ac0: 73 35 5f 69 6e 64 65 78 2e 63 2e 20 66 74 73 35  s5_index.c. fts5
2ad0: 5f 69 6e 64 65 78 2e 63 20 63 6f 6e 74 61 69 6e  _index.c contain
2ae0: 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 0a  s contains code.
2af0: 2a 2a 20 74 6f 20 61 63 63 65 73 73 20 74 68 65  ** to access the
2b00: 20 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20   data stored in 
2b10: 74 68 65 20 25 5f 64 61 74 61 20 74 61 62 6c 65  the %_data table
2b20: 2e 0a 2a 2f 0a 0a 74 79 70 65 64 65 66 20 73 74  ..*/..typedef st
2b30: 72 75 63 74 20 46 74 73 35 49 6e 64 65 78 20 46  ruct Fts5Index F
2b40: 74 73 35 49 6e 64 65 78 3b 0a 74 79 70 65 64 65  ts5Index;.typede
2b50: 66 20 73 74 72 75 63 74 20 46 74 73 35 49 6e 64  f struct Fts5Ind
2b60: 65 78 49 74 65 72 20 46 74 73 35 49 6e 64 65 78  exIter Fts5Index
2b70: 49 74 65 72 3b 0a 0a 73 74 72 75 63 74 20 46 74  Iter;..struct Ft
2b80: 73 35 49 6e 64 65 78 49 74 65 72 20 7b 0a 20 20  s5IndexIter {.  
2b90: 69 36 34 20 69 52 6f 77 69 64 3b 0a 20 20 63 6f  i64 iRowid;.  co
2ba0: 6e 73 74 20 75 38 20 2a 70 44 61 74 61 3b 0a 20  nst u8 *pData;. 
2bb0: 20 69 6e 74 20 6e 44 61 74 61 3b 0a 20 20 75 38   int nData;.  u8
2bc0: 20 62 45 6f 66 3b 0a 7d 3b 0a 0a 23 64 65 66 69   bEof;.};..#defi
2bd0: 6e 65 20 73 71 6c 69 74 65 33 46 74 73 35 49 74  ne sqlite3Fts5It
2be0: 65 72 45 6f 66 28 78 29 20 28 28 78 29 2d 3e 62  erEof(x) ((x)->b
2bf0: 45 6f 66 29 0a 0a 2f 2a 0a 2a 2a 20 56 61 6c 75  Eof)../*.** Valu
2c00: 65 73 20 75 73 65 64 20 61 73 20 70 61 72 74 20  es used as part 
2c10: 6f 66 20 74 68 65 20 66 6c 61 67 73 20 61 72 67  of the flags arg
2c20: 75 6d 65 6e 74 20 70 61 73 73 65 64 20 74 6f 20  ument passed to 
2c30: 49 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f  IndexQuery()..*/
2c40: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44  .#define FTS5IND
2c50: 45 58 5f 51 55 45 52 59 5f 50 52 45 46 49 58 20  EX_QUERY_PREFIX 
2c60: 20 20 20 20 30 78 30 30 30 31 20 20 20 2f 2a 20      0x0001   /* 
2c70: 50 72 65 66 69 78 20 71 75 65 72 79 20 2a 2f 0a  Prefix query */.
2c80: 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44 45  #define FTS5INDE
2c90: 58 5f 51 55 45 52 59 5f 44 45 53 43 20 20 20 20  X_QUERY_DESC    
2ca0: 20 20 20 30 78 30 30 30 32 20 20 20 2f 2a 20 44     0x0002   /* D
2cb0: 6f 63 73 20 69 6e 20 64 65 73 63 65 6e 64 69 6e  ocs in descendin
2cc0: 67 20 72 6f 77 69 64 20 6f 72 64 65 72 20 2a 2f  g rowid order */
2cd0: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44  .#define FTS5IND
2ce0: 45 58 5f 51 55 45 52 59 5f 53 43 41 4e 20 20 20  EX_QUERY_SCAN   
2cf0: 20 20 20 20 30 78 30 30 30 38 20 20 20 2f 2a 20      0x0008   /* 
2d00: 53 63 61 6e 20 71 75 65 72 79 20 28 66 74 73 35  Scan query (fts5
2d10: 76 6f 63 61 62 29 20 2a 2f 0a 0a 2f 2a 20 54 68  vocab) */../* Th
2d20: 65 20 66 6f 6c 6c 6f 77 69 6e 67 20 61 72 65 20  e following are 
2d30: 75 73 65 64 20 69 6e 74 65 72 6e 61 6c 6c 79 20  used internally 
2d40: 62 79 20 74 68 65 20 66 74 73 35 5f 69 6e 64 65  by the fts5_inde
2d50: 78 2e 63 20 6d 6f 64 75 6c 65 2e 20 54 68 65 79  x.c module. They
2d60: 20 61 72 65 0a 2a 2a 20 64 65 66 69 6e 65 64 20   are.** defined 
2d70: 68 65 72 65 20 6f 6e 6c 79 20 74 6f 20 6d 61 6b  here only to mak
2d80: 65 20 69 74 20 65 61 73 69 65 72 20 74 6f 20 61  e it easier to a
2d90: 76 6f 69 64 20 63 6c 61 73 68 65 73 20 77 69 74  void clashes wit
2da0: 68 20 74 68 65 20 66 6c 61 67 73 0a 2a 2a 20 61  h the flags.** a
2db0: 62 6f 76 65 2e 20 2a 2f 0a 23 64 65 66 69 6e 65  bove. */.#define
2dc0: 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45 52 59   FTS5INDEX_QUERY
2dd0: 5f 53 4b 49 50 45 4d 50 54 59 20 20 30 78 30 30  _SKIPEMPTY  0x00
2de0: 31 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49  10.#define FTS5I
2df0: 4e 44 45 58 5f 51 55 45 52 59 5f 4e 4f 4f 55 54  NDEX_QUERY_NOOUT
2e00: 50 55 54 20 20 20 30 78 30 30 32 30 0a 0a 2f 2a  PUT   0x0020../*
2e10: 0a 2a 2a 20 43 72 65 61 74 65 2f 64 65 73 74 72  .** Create/destr
2e20: 6f 79 20 61 6e 20 46 74 73 35 49 6e 64 65 78 20  oy an Fts5Index 
2e30: 6f 62 6a 65 63 74 2e 0a 2a 2f 0a 69 6e 74 20 73  object..*/.int s
2e40: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4f  qlite3Fts5IndexO
2e50: 70 65 6e 28 46 74 73 35 43 6f 6e 66 69 67 20 2a  pen(Fts5Config *
2e60: 70 43 6f 6e 66 69 67 2c 20 69 6e 74 20 62 43 72  pConfig, int bCr
2e70: 65 61 74 65 2c 20 46 74 73 35 49 6e 64 65 78 2a  eate, Fts5Index*
2e80: 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 69 6e 74 20  *, char**);.int 
2e90: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78  sqlite3Fts5Index
2ea0: 43 6c 6f 73 65 28 46 74 73 35 49 6e 64 65 78 20  Close(Fts5Index 
2eb0: 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20 52 65 74 75  *p);../*.** Retu
2ec0: 72 6e 20 61 20 73 69 6d 70 6c 65 20 63 68 65 63  rn a simple chec
2ed0: 6b 73 75 6d 20 76 61 6c 75 65 20 62 61 73 65 64  ksum value based
2ee0: 20 6f 6e 20 74 68 65 20 61 72 67 75 6d 65 6e 74   on the argument
2ef0: 73 2e 0a 2a 2f 0a 75 36 34 20 73 71 6c 69 74 65  s..*/.u64 sqlite
2f00: 33 46 74 73 35 49 6e 64 65 78 45 6e 74 72 79 43  3Fts5IndexEntryC
2f10: 6b 73 75 6d 28 0a 20 20 69 36 34 20 69 52 6f 77  ksum(.  i64 iRow
2f20: 69 64 2c 20 0a 20 20 69 6e 74 20 69 43 6f 6c 2c  id, .  int iCol,
2f30: 20 0a 20 20 69 6e 74 20 69 50 6f 73 2c 20 0a 20   .  int iPos, . 
2f40: 20 69 6e 74 20 69 49 64 78 2c 0a 20 20 63 6f 6e   int iIdx,.  con
2f50: 73 74 20 63 68 61 72 20 2a 70 54 65 72 6d 2c 0a  st char *pTerm,.
2f60: 20 20 69 6e 74 20 6e 54 65 72 6d 0a 29 3b 0a 0a    int nTerm.);..
2f70: 2f 2a 0a 2a 2a 20 41 72 67 75 6d 65 6e 74 20 70  /*.** Argument p
2f80: 20 70 6f 69 6e 74 73 20 74 6f 20 61 20 62 75 66   points to a buf
2f90: 66 65 72 20 63 6f 6e 74 61 69 6e 69 6e 67 20 75  fer containing u
2fa0: 74 66 2d 38 20 74 65 78 74 20 74 68 61 74 20 69  tf-8 text that i
2fb0: 73 20 6e 20 62 79 74 65 73 20 69 6e 20 0a 2a 2a  s n bytes in .**
2fc0: 20 73 69 7a 65 2e 20 52 65 74 75 72 6e 20 74 68   size. Return th
2fd0: 65 20 6e 75 6d 62 65 72 20 6f 66 20 62 79 74 65  e number of byte
2fe0: 73 20 69 6e 20 74 68 65 20 6e 43 68 61 72 20 63  s in the nChar c
2ff0: 68 61 72 61 63 74 65 72 20 70 72 65 66 69 78 20  haracter prefix 
3000: 6f 66 20 74 68 65 0a 2a 2a 20 62 75 66 66 65 72  of the.** buffer
3010: 2c 20 6f 72 20 30 20 69 66 20 74 68 65 72 65 20  , or 0 if there 
3020: 61 72 65 20 6c 65 73 73 20 74 68 61 6e 20 6e 43  are less than nC
3030: 68 61 72 20 63 68 61 72 61 63 74 65 72 73 20 69  har characters i
3040: 6e 20 74 6f 74 61 6c 2e 0a 2a 2f 0a 69 6e 74 20  n total..*/.int 
3050: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78  sqlite3Fts5Index
3060: 43 68 61 72 6c 65 6e 54 6f 42 79 74 65 6c 65 6e  CharlenToBytelen
3070: 28 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  (.  const char *
3080: 70 2c 20 0a 20 20 69 6e 74 20 6e 42 79 74 65 2c  p, .  int nByte,
3090: 20 0a 20 20 69 6e 74 20 6e 43 68 61 72 0a 29 3b   .  int nChar.);
30a0: 0a 0a 2f 2a 0a 2a 2a 20 4f 70 65 6e 20 61 20 6e  ../*.** Open a n
30b0: 65 77 20 69 74 65 72 61 74 6f 72 20 74 6f 20 69  ew iterator to i
30c0: 74 65 72 61 74 65 20 74 68 6f 75 67 68 20 61 6c  terate though al
30d0: 6c 20 72 6f 77 69 64 73 20 74 68 61 74 20 6d 61  l rowids that ma
30e0: 74 63 68 20 74 68 65 20 0a 2a 2a 20 73 70 65 63  tch the .** spec
30f0: 69 66 69 65 64 20 74 6f 6b 65 6e 20 6f 72 20 74  ified token or t
3100: 6f 6b 65 6e 20 70 72 65 66 69 78 2e 0a 2a 2f 0a  oken prefix..*/.
3110: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
3120: 6e 64 65 78 51 75 65 72 79 28 0a 20 20 46 74 73  ndexQuery(.  Fts
3130: 35 49 6e 64 65 78 20 2a 70 2c 20 20 20 20 20 20  5Index *p,      
3140: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
3150: 46 54 53 20 69 6e 64 65 78 20 74 6f 20 71 75 65  FTS index to que
3160: 72 79 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68  ry */.  const ch
3170: 61 72 20 2a 70 54 6f 6b 65 6e 2c 20 69 6e 74 20  ar *pToken, int 
3180: 6e 54 6f 6b 65 6e 2c 20 2f 2a 20 54 6f 6b 65 6e  nToken, /* Token
3190: 20 28 6f 72 20 70 72 65 66 69 78 29 20 74 6f 20   (or prefix) to 
31a0: 71 75 65 72 79 20 66 6f 72 20 2a 2f 0a 20 20 69  query for */.  i
31b0: 6e 74 20 66 6c 61 67 73 2c 20 20 20 20 20 20 20  nt flags,       
31c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
31d0: 2a 20 4d 61 73 6b 20 6f 66 20 46 54 53 35 49 4e  * Mask of FTS5IN
31e0: 44 45 58 5f 51 55 45 52 59 5f 58 20 66 6c 61 67  DEX_QUERY_X flag
31f0: 73 20 2a 2f 0a 20 20 46 74 73 35 43 6f 6c 73 65  s */.  Fts5Colse
3200: 74 20 2a 70 43 6f 6c 73 65 74 2c 20 20 20 20 20  t *pColset,     
3210: 20 20 20 20 20 20 20 2f 2a 20 4d 61 74 63 68 20         /* Match 
3220: 74 68 65 73 65 20 63 6f 6c 75 6d 6e 73 20 6f 6e  these columns on
3230: 6c 79 20 2a 2f 0a 20 20 46 74 73 35 49 6e 64 65  ly */.  Fts5Inde
3240: 78 49 74 65 72 20 2a 2a 70 70 49 74 65 72 20 20  xIter **ppIter  
3250: 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20          /* OUT: 
3260: 4e 65 77 20 69 74 65 72 61 74 6f 72 20 6f 62 6a  New iterator obj
3270: 65 63 74 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a  ect */.);../*.**
3280: 20 54 68 65 20 76 61 72 69 6f 75 73 20 6f 70 65   The various ope
3290: 72 61 74 69 6f 6e 73 20 6f 6e 20 6f 70 65 6e 20  rations on open 
32a0: 74 6f 6b 65 6e 20 6f 72 20 74 6f 6b 65 6e 20 70  token or token p
32b0: 72 65 66 69 78 20 69 74 65 72 61 74 6f 72 73 20  refix iterators 
32c0: 6f 70 65 6e 65 64 0a 2a 2a 20 75 73 69 6e 67 20  opened.** using 
32d0: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78  sqlite3Fts5Index
32e0: 51 75 65 72 79 28 29 2e 0a 2a 2f 0a 69 6e 74 20  Query()..*/.int 
32f0: 73 71 6c 69 74 65 33 46 74 73 35 49 74 65 72 4e  sqlite3Fts5IterN
3300: 65 78 74 28 46 74 73 35 49 6e 64 65 78 49 74 65  ext(Fts5IndexIte
3310: 72 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  r*);.int sqlite3
3320: 46 74 73 35 49 74 65 72 4e 65 78 74 46 72 6f 6d  Fts5IterNextFrom
3330: 28 46 74 73 35 49 6e 64 65 78 49 74 65 72 2a 2c  (Fts5IndexIter*,
3340: 20 69 36 34 20 69 4d 61 74 63 68 29 3b 0a 0a 2f   i64 iMatch);../
3350: 2a 0a 2a 2a 20 43 6c 6f 73 65 20 61 6e 20 69 74  *.** Close an it
3360: 65 72 61 74 6f 72 20 6f 70 65 6e 65 64 20 62 79  erator opened by
3370: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3380: 78 51 75 65 72 79 28 29 2e 0a 2a 2f 0a 76 6f 69  xQuery()..*/.voi
3390: 64 20 73 71 6c 69 74 65 33 46 74 73 35 49 74 65  d sqlite3Fts5Ite
33a0: 72 43 6c 6f 73 65 28 46 74 73 35 49 6e 64 65 78  rClose(Fts5Index
33b0: 49 74 65 72 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 54  Iter*);../*.** T
33c0: 68 69 73 20 69 6e 74 65 72 66 61 63 65 20 69 73  his interface is
33d0: 20 75 73 65 64 20 62 79 20 74 68 65 20 66 74 73   used by the fts
33e0: 35 76 6f 63 61 62 20 6d 6f 64 75 6c 65 2e 0a 2a  5vocab module..*
33f0: 2f 0a 63 6f 6e 73 74 20 63 68 61 72 20 2a 73 71  /.const char *sq
3400: 6c 69 74 65 33 46 74 73 35 49 74 65 72 54 65 72  lite3Fts5IterTer
3410: 6d 28 46 74 73 35 49 6e 64 65 78 49 74 65 72 2a  m(Fts5IndexIter*
3420: 2c 20 69 6e 74 2a 29 3b 0a 69 6e 74 20 73 71 6c  , int*);.int sql
3430: 69 74 65 33 46 74 73 35 49 74 65 72 4e 65 78 74  ite3Fts5IterNext
3440: 53 63 61 6e 28 46 74 73 35 49 6e 64 65 78 49 74  Scan(Fts5IndexIt
3450: 65 72 2a 29 3b 0a 0a 0a 2f 2a 0a 2a 2a 20 49 6e  er*);.../*.** In
3460: 73 65 72 74 20 6f 72 20 72 65 6d 6f 76 65 20 64  sert or remove d
3470: 61 74 61 20 74 6f 20 6f 72 20 66 72 6f 6d 20 74  ata to or from t
3480: 68 65 20 69 6e 64 65 78 2e 20 45 61 63 68 20 74  he index. Each t
3490: 69 6d 65 20 61 20 64 6f 63 75 6d 65 6e 74 20 69  ime a document i
34a0: 73 20 0a 2a 2a 20 61 64 64 65 64 20 74 6f 20 6f  s .** added to o
34b0: 72 20 72 65 6d 6f 76 65 64 20 66 72 6f 6d 20 74  r removed from t
34c0: 68 65 20 69 6e 64 65 78 2c 20 74 68 69 73 20 66  he index, this f
34d0: 75 6e 63 74 69 6f 6e 20 69 73 20 63 61 6c 6c 65  unction is calle
34e0: 64 20 6f 6e 65 20 6f 72 20 6d 6f 72 65 0a 2a 2a  d one or more.**
34f0: 20 74 69 6d 65 73 2e 0a 2a 2a 0a 2a 2a 20 46 6f   times..**.** Fo
3500: 72 20 61 6e 20 69 6e 73 65 72 74 2c 20 69 74 20  r an insert, it 
3510: 6d 75 73 74 20 62 65 20 63 61 6c 6c 65 64 20 6f  must be called o
3520: 6e 63 65 20 66 6f 72 20 65 61 63 68 20 74 6f 6b  nce for each tok
3530: 65 6e 20 69 6e 20 74 68 65 20 6e 65 77 20 64 6f  en in the new do
3540: 63 75 6d 65 6e 74 2e 0a 2a 2a 20 49 66 20 74 68  cument..** If th
3550: 65 20 6f 70 65 72 61 74 69 6f 6e 20 69 73 20 61  e operation is a
3560: 20 64 65 6c 65 74 65 2c 20 69 74 20 6d 75 73 74   delete, it must
3570: 20 62 65 20 63 61 6c 6c 65 64 20 28 61 74 20 6c   be called (at l
3580: 65 61 73 74 29 20 6f 6e 63 65 20 66 6f 72 20 65  east) once for e
3590: 61 63 68 0a 2a 2a 20 75 6e 69 71 75 65 20 74 6f  ach.** unique to
35a0: 6b 65 6e 20 69 6e 20 74 68 65 20 64 6f 63 75 6d  ken in the docum
35b0: 65 6e 74 20 77 69 74 68 20 61 6e 20 69 43 6f 6c  ent with an iCol
35c0: 20 76 61 6c 75 65 20 6c 65 73 73 20 74 68 61 6e   value less than
35d0: 20 7a 65 72 6f 2e 20 54 68 65 20 69 50 6f 73 0a   zero. The iPos.
35e0: 2a 2a 20 61 72 67 75 6d 65 6e 74 20 69 73 20 69  ** argument is i
35f0: 67 6e 6f 72 65 64 20 66 6f 72 20 61 20 64 65 6c  gnored for a del
3600: 65 74 65 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69  ete..*/.int sqli
3610: 74 65 33 46 74 73 35 49 6e 64 65 78 57 72 69 74  te3Fts5IndexWrit
3620: 65 28 0a 20 20 46 74 73 35 49 6e 64 65 78 20 2a  e(.  Fts5Index *
3630: 70 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20  p,              
3640: 20 20 20 20 20 2f 2a 20 49 6e 64 65 78 20 74 6f       /* Index to
3650: 20 77 72 69 74 65 20 74 6f 20 2a 2f 0a 20 20 69   write to */.  i
3660: 6e 74 20 69 43 6f 6c 2c 20 20 20 20 20 20 20 20  nt iCol,        
3670: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
3680: 2a 20 43 6f 6c 75 6d 6e 20 74 6f 6b 65 6e 20 61  * Column token a
3690: 70 70 65 61 72 73 20 69 6e 20 28 2d 76 65 20 2d  ppears in (-ve -
36a0: 3e 20 64 65 6c 65 74 65 29 20 2a 2f 0a 20 20 69  > delete) */.  i
36b0: 6e 74 20 69 50 6f 73 2c 20 20 20 20 20 20 20 20  nt iPos,        
36c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
36d0: 2a 20 50 6f 73 69 74 69 6f 6e 20 6f 66 20 74 6f  * Position of to
36e0: 6b 65 6e 20 77 69 74 68 69 6e 20 63 6f 6c 75 6d  ken within colum
36f0: 6e 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61  n */.  const cha
3700: 72 20 2a 70 54 6f 6b 65 6e 2c 20 69 6e 74 20 6e  r *pToken, int n
3710: 54 6f 6b 65 6e 20 20 2f 2a 20 54 6f 6b 65 6e 20  Token  /* Token 
3720: 74 6f 20 61 64 64 20 6f 72 20 72 65 6d 6f 76 65  to add or remove
3730: 20 74 6f 20 6f 72 20 66 72 6f 6d 20 69 6e 64 65   to or from inde
3740: 78 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 49  x */.);../*.** I
3750: 6e 64 69 63 61 74 65 20 74 68 61 74 20 73 75 62  ndicate that sub
3760: 73 65 71 75 65 6e 74 20 63 61 6c 6c 73 20 74 6f  sequent calls to
3770: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3780: 78 57 72 69 74 65 28 29 20 70 65 72 74 61 69 6e  xWrite() pertain
3790: 20 74 6f 0a 2a 2a 20 64 6f 63 75 6d 65 6e 74 20   to.** document 
37a0: 69 44 6f 63 69 64 2e 0a 2a 2f 0a 69 6e 74 20 73  iDocid..*/.int s
37b0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 42  qlite3Fts5IndexB
37c0: 65 67 69 6e 57 72 69 74 65 28 0a 20 20 46 74 73  eginWrite(.  Fts
37d0: 35 49 6e 64 65 78 20 2a 70 2c 20 20 20 20 20 20  5Index *p,      
37e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
37f0: 49 6e 64 65 78 20 74 6f 20 77 72 69 74 65 20 74  Index to write t
3800: 6f 20 2a 2f 0a 20 20 69 6e 74 20 62 44 65 6c 65  o */.  int bDele
3810: 74 65 2c 20 20 20 20 20 20 20 20 20 20 20 20 20  te,             
3820: 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65 20 69         /* True i
3830: 66 20 63 75 72 72 65 6e 74 20 6f 70 65 72 61 74  f current operat
3840: 69 6f 6e 20 69 73 20 61 20 64 65 6c 65 74 65 20  ion is a delete 
3850: 2a 2f 0a 20 20 69 36 34 20 69 44 6f 63 69 64 20  */.  i64 iDocid 
3860: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3870: 20 20 20 20 20 2f 2a 20 44 6f 63 69 64 20 74 6f       /* Docid to
3880: 20 61 64 64 20 6f 72 20 72 65 6d 6f 76 65 20 64   add or remove d
3890: 61 74 61 20 66 72 6f 6d 20 2a 2f 0a 29 3b 0a 0a  ata from */.);..
38a0: 2f 2a 0a 2a 2a 20 46 6c 75 73 68 20 61 6e 79 20  /*.** Flush any 
38b0: 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20 74  data stored in t
38c0: 68 65 20 69 6e 2d 6d 65 6d 6f 72 79 20 68 61 73  he in-memory has
38d0: 68 20 74 61 62 6c 65 73 20 74 6f 20 74 68 65 20  h tables to the 
38e0: 64 61 74 61 62 61 73 65 2e 0a 2a 2a 20 49 66 20  database..** If 
38f0: 74 68 65 20 62 43 6f 6d 6d 69 74 20 66 6c 61 67  the bCommit flag
3900: 20 69 73 20 74 72 75 65 2c 20 61 6c 73 6f 20 63   is true, also c
3910: 6c 6f 73 65 20 61 6e 79 20 6f 70 65 6e 20 62 6c  lose any open bl
3920: 6f 62 20 68 61 6e 64 6c 65 73 2e 0a 2a 2f 0a 69  ob handles..*/.i
3930: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3940: 64 65 78 53 79 6e 63 28 46 74 73 35 49 6e 64 65  dexSync(Fts5Inde
3950: 78 20 2a 70 2c 20 69 6e 74 20 62 43 6f 6d 6d 69  x *p, int bCommi
3960: 74 29 3b 0a 0a 2f 2a 0a 2a 2a 20 44 69 73 63 61  t);../*.** Disca
3970: 72 64 20 61 6e 79 20 64 61 74 61 20 73 74 6f 72  rd any data stor
3980: 65 64 20 69 6e 20 74 68 65 20 69 6e 2d 6d 65 6d  ed in the in-mem
3990: 6f 72 79 20 68 61 73 68 20 74 61 62 6c 65 73 2e  ory hash tables.
39a0: 20 44 6f 20 6e 6f 74 20 77 72 69 74 65 20 69 74   Do not write it
39b0: 0a 2a 2a 20 74 6f 20 74 68 65 20 64 61 74 61 62  .** to the datab
39c0: 61 73 65 2e 20 41 64 64 69 74 69 6f 6e 61 6c 6c  ase. Additionall
39d0: 79 2c 20 61 73 73 75 6d 65 20 74 68 61 74 20 74  y, assume that t
39e0: 68 65 20 63 6f 6e 74 65 6e 74 73 20 6f 66 20 74  he contents of t
39f0: 68 65 20 25 5f 64 61 74 61 0a 2a 2a 20 74 61 62  he %_data.** tab
3a00: 6c 65 20 6d 61 79 20 68 61 76 65 20 63 68 61 6e  le may have chan
3a10: 67 65 64 20 6f 6e 20 64 69 73 6b 2e 20 53 6f 20  ged on disk. So 
3a20: 61 6e 79 20 69 6e 2d 6d 65 6d 6f 72 79 20 63 61  any in-memory ca
3a30: 63 68 65 73 20 6f 66 20 25 5f 64 61 74 61 20 0a  ches of %_data .
3a40: 2a 2a 20 72 65 63 6f 72 64 73 20 6d 75 73 74 20  ** records must 
3a50: 62 65 20 69 6e 76 61 6c 69 64 61 74 65 64 2e 0a  be invalidated..
3a60: 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  */.int sqlite3Ft
3a70: 73 35 49 6e 64 65 78 52 6f 6c 6c 62 61 63 6b 28  s5IndexRollback(
3a80: 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a  Fts5Index *p);..
3a90: 2f 2a 0a 2a 2a 20 47 65 74 20 6f 72 20 73 65 74  /*.** Get or set
3aa0: 20 74 68 65 20 22 61 76 65 72 61 67 65 73 22 20   the "averages" 
3ab0: 76 61 6c 75 65 73 2e 0a 2a 2f 0a 69 6e 74 20 73  values..*/.int s
3ac0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 47  qlite3Fts5IndexG
3ad0: 65 74 41 76 65 72 61 67 65 73 28 46 74 73 35 49  etAverages(Fts5I
3ae0: 6e 64 65 78 20 2a 70 2c 20 69 36 34 20 2a 70 6e  ndex *p, i64 *pn
3af0: 52 6f 77 2c 20 69 36 34 20 2a 61 6e 53 69 7a 65  Row, i64 *anSize
3b00: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  );.int sqlite3Ft
3b10: 73 35 49 6e 64 65 78 53 65 74 41 76 65 72 61 67  s5IndexSetAverag
3b20: 65 73 28 46 74 73 35 49 6e 64 65 78 20 2a 70 2c  es(Fts5Index *p,
3b30: 20 63 6f 6e 73 74 20 75 38 2a 2c 20 69 6e 74 29   const u8*, int)
3b40: 3b 0a 0a 2f 2a 0a 2a 2a 20 46 75 6e 63 74 69 6f  ;../*.** Functio
3b50: 6e 73 20 63 61 6c 6c 65 64 20 62 79 20 74 68 65  ns called by the
3b60: 20 73 74 6f 72 61 67 65 20 6d 6f 64 75 6c 65 20   storage module 
3b70: 61 73 20 70 61 72 74 20 6f 66 20 69 6e 74 65 67  as part of integ
3b80: 72 69 74 79 2d 63 68 65 63 6b 2e 0a 2a 2f 0a 69  rity-check..*/.i
3b90: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3ba0: 64 65 78 49 6e 74 65 67 72 69 74 79 43 68 65 63  dexIntegrityChec
3bb0: 6b 28 46 74 73 35 49 6e 64 65 78 2a 2c 20 75 36  k(Fts5Index*, u6
3bc0: 34 20 63 6b 73 75 6d 29 3b 0a 0a 2f 2a 20 0a 2a  4 cksum);../* .*
3bd0: 2a 20 43 61 6c 6c 65 64 20 64 75 72 69 6e 67 20  * Called during 
3be0: 76 69 72 74 75 61 6c 20 6d 6f 64 75 6c 65 20 69  virtual module i
3bf0: 6e 69 74 69 61 6c 69 7a 61 74 69 6f 6e 20 74 6f  nitialization to
3c00: 20 72 65 67 69 73 74 65 72 20 55 44 46 20 0a 2a   register UDF .*
3c10: 2a 20 66 74 73 35 5f 64 65 63 6f 64 65 28 29 20  * fts5_decode() 
3c20: 77 69 74 68 20 53 51 4c 69 74 65 20 0a 2a 2f 0a  with SQLite .*/.
3c30: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
3c40: 6e 64 65 78 49 6e 69 74 28 73 71 6c 69 74 65 33  ndexInit(sqlite3
3c50: 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  *);..int sqlite3
3c60: 46 74 73 35 49 6e 64 65 78 49 6e 63 72 43 6f 6f  Fts5IndexIncrCoo
3c70: 6b 69 65 28 46 74 73 35 49 6e 64 65 78 2a 29 3b  kie(Fts5Index*);
3c80: 0a 0a 2f 2a 0a 2a 2a 20 52 65 74 75 72 6e 20 74  ../*.** Return t
3c90: 68 65 20 74 6f 74 61 6c 20 6e 75 6d 62 65 72 20  he total number 
3ca0: 6f 66 20 65 6e 74 72 69 65 73 20 72 65 61 64 20  of entries read 
3cb0: 66 72 6f 6d 20 74 68 65 20 25 5f 64 61 74 61 20  from the %_data 
3cc0: 74 61 62 6c 65 20 62 79 20 0a 2a 2a 20 74 68 69  table by .** thi
3cd0: 73 20 63 6f 6e 6e 65 63 74 69 6f 6e 20 73 69 6e  s connection sin
3ce0: 63 65 20 69 74 20 77 61 73 20 63 72 65 61 74 65  ce it was create
3cf0: 64 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  d..*/.int sqlite
3d00: 33 46 74 73 35 49 6e 64 65 78 52 65 61 64 73 28  3Fts5IndexReads(
3d10: 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a  Fts5Index *p);..
3d20: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
3d30: 6e 64 65 78 52 65 69 6e 69 74 28 46 74 73 35 49  ndexReinit(Fts5I
3d40: 6e 64 65 78 20 2a 70 29 3b 0a 69 6e 74 20 73 71  ndex *p);.int sq
3d50: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4f 70  lite3Fts5IndexOp
3d60: 74 69 6d 69 7a 65 28 46 74 73 35 49 6e 64 65 78  timize(Fts5Index
3d70: 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65   *p);.int sqlite
3d80: 33 46 74 73 35 49 6e 64 65 78 4d 65 72 67 65 28  3Fts5IndexMerge(
3d90: 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 69 6e  Fts5Index *p, in
3da0: 74 20 6e 4d 65 72 67 65 29 3b 0a 69 6e 74 20 73  t nMerge);.int s
3db0: 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 4e  qlite3Fts5IndexN
3dc0: 65 77 54 72 61 6e 73 28 46 74 73 35 49 6e 64 65  ewTrans(Fts5Inde
3dd0: 78 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  x *p);..int sqli
3de0: 74 65 33 46 74 73 35 49 6e 64 65 78 4c 6f 61 64  te3Fts5IndexLoad
3df0: 43 6f 6e 66 69 67 28 46 74 73 35 49 6e 64 65 78  Config(Fts5Index
3e00: 20 2a 70 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69   *p);..void sqli
3e10: 74 65 33 46 74 73 35 49 6e 64 65 78 43 6c 6f 73  te3Fts5IndexClos
3e20: 65 52 65 61 64 65 72 28 46 74 73 35 49 6e 64 65  eReader(Fts5Inde
3e30: 78 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20  x*);../*.** End 
3e40: 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f 20  of interface to 
3e50: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 69 6e 64  code in fts5_ind
3e60: 65 78 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ex.c..**********
3e70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3e80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3e90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ea0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3eb0: 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  /../************
3ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a  **************.*
3f00: 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20 63  * Interface to c
3f10: 6f 64 65 20 69 6e 20 66 74 73 35 5f 76 61 72 69  ode in fts5_vari
3f20: 6e 74 2e 63 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71  nt.c. .*/.int sq
3f30: 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72 69  lite3Fts5GetVari
3f40: 6e 74 33 32 28 63 6f 6e 73 74 20 75 6e 73 69 67  nt32(const unsig
3f50: 6e 65 64 20 63 68 61 72 20 2a 70 2c 20 75 33 32  ned char *p, u32
3f60: 20 2a 76 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65   *v);.int sqlite
3f70: 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 4c 65  3Fts5GetVarintLe
3f80: 6e 28 75 33 32 20 69 56 61 6c 29 3b 0a 75 38 20  n(u32 iVal);.u8 
3f90: 73 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61  sqlite3Fts5GetVa
3fa0: 72 69 6e 74 28 63 6f 6e 73 74 20 75 6e 73 69 67  rint(const unsig
3fb0: 6e 65 64 20 63 68 61 72 2a 2c 20 75 36 34 2a 29  ned char*, u64*)
3fc0: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
3fd0: 35 50 75 74 56 61 72 69 6e 74 28 75 6e 73 69 67  5PutVarint(unsig
3fe0: 6e 65 64 20 63 68 61 72 20 2a 70 2c 20 75 36 34  ned char *p, u64
3ff0: 20 76 29 3b 0a 0a 23 64 65 66 69 6e 65 20 66 74   v);..#define ft
4000: 73 35 47 65 74 56 61 72 69 6e 74 33 32 28 61 2c  s5GetVarint32(a,
4010: 62 29 20 73 71 6c 69 74 65 33 46 74 73 35 47 65  b) sqlite3Fts5Ge
4020: 74 56 61 72 69 6e 74 33 32 28 61 2c 28 75 33 32  tVarint32(a,(u32
4030: 2a 29 26 62 29 0a 23 64 65 66 69 6e 65 20 66 74  *)&b).#define ft
4040: 73 35 47 65 74 56 61 72 69 6e 74 20 20 20 20 73  s5GetVarint    s
4050: 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72  qlite3Fts5GetVar
4060: 69 6e 74 0a 0a 23 64 65 66 69 6e 65 20 66 74 73  int..#define fts
4070: 35 46 61 73 74 47 65 74 56 61 72 69 6e 74 33 32  5FastGetVarint32
4080: 28 61 2c 20 69 4f 66 66 2c 20 6e 56 61 6c 29 20  (a, iOff, nVal) 
4090: 7b 20 20 20 20 20 20 5c 0a 20 20 6e 56 61 6c 20  {      \.  nVal 
40a0: 3d 20 28 61 29 5b 69 4f 66 66 2b 2b 5d 3b 20 20  = (a)[iOff++];  
40b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
40c0: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 20 20 69             \.  i
40d0: 66 28 20 6e 56 61 6c 20 26 20 30 78 38 30 20 29  f( nVal & 0x80 )
40e0: 7b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  {               
40f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 5c                 \
4100: 0a 20 20 20 20 69 4f 66 66 2d 2d 3b 20 20 20 20  .    iOff--;    
4110: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4120: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4130: 20 20 20 5c 0a 20 20 20 20 69 4f 66 66 20 2b 3d     \.    iOff +=
4140: 20 66 74 73 35 47 65 74 56 61 72 69 6e 74 33 32   fts5GetVarint32
4150: 28 26 28 61 29 5b 69 4f 66 66 5d 2c 20 6e 56 61  (&(a)[iOff], nVa
4160: 6c 29 3b 20 20 20 20 5c 0a 20 20 7d 20 20 20 20  l);    \.  }    
4170: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4180: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4190: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 7d 0a 0a             \.}..
41a0: 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e  ./*.** End of in
41b0: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
41c0: 69 6e 20 66 74 73 35 5f 76 61 72 69 6e 74 2e 63  in fts5_varint.c
41d0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
41e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
41f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a  ************/...
4220: 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  /***************
4230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49  ***********.** I
4270: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
4280: 20 69 6e 20 66 74 73 35 2e 63 2e 20 0a 2a 2f 0a   in fts5.c. .*/.
4290: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
42a0: 47 65 74 54 6f 6b 65 6e 69 7a 65 72 28 0a 20 20  GetTokenizer(.  
42b0: 46 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 0a 20 20  Fts5Global*, .  
42c0: 63 6f 6e 73 74 20 63 68 61 72 20 2a 2a 61 7a 41  const char **azA
42d0: 72 67 2c 0a 20 20 69 6e 74 20 6e 41 72 67 2c 0a  rg,.  int nArg,.
42e0: 20 20 46 74 73 35 54 6f 6b 65 6e 69 7a 65 72 2a    Fts5Tokenizer*
42f0: 2a 2c 0a 20 20 66 74 73 35 5f 74 6f 6b 65 6e 69  *,.  fts5_tokeni
4300: 7a 65 72 2a 2a 2c 0a 20 20 63 68 61 72 20 2a 2a  zer**,.  char **
4310: 70 7a 45 72 72 0a 29 3b 0a 0a 46 74 73 35 49 6e  pzErr.);..Fts5In
4320: 64 65 78 20 2a 73 71 6c 69 74 65 33 46 74 73 35  dex *sqlite3Fts5
4330: 49 6e 64 65 78 46 72 6f 6d 43 73 72 69 64 28 46  IndexFromCsrid(F
4340: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 69 36 34 2c  ts5Global*, i64,
4350: 20 46 74 73 35 43 6f 6e 66 69 67 20 2a 2a 29 3b   Fts5Config **);
4360: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
4370: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
4380: 20 69 6e 20 66 74 73 35 2e 63 2e 0a 2a 2a 2a 2a   in fts5.c..****
4390: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43d0: 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a  ******/../******
43e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4420: 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63  ****.** Interfac
4430: 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73  e to code in fts
4440: 35 5f 68 61 73 68 2e 63 2e 20 0a 2a 2f 0a 74 79  5_hash.c. .*/.ty
4450: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
4460: 35 48 61 73 68 20 46 74 73 35 48 61 73 68 3b 0a  5Hash Fts5Hash;.
4470: 0a 2f 2a 0a 2a 2a 20 43 72 65 61 74 65 20 61 20  ./*.** Create a 
4480: 68 61 73 68 20 74 61 62 6c 65 2c 20 66 72 65 65  hash table, free
4490: 20 61 20 68 61 73 68 20 74 61 62 6c 65 2e 0a 2a   a hash table..*
44a0: 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  /.int sqlite3Fts
44b0: 35 48 61 73 68 4e 65 77 28 46 74 73 35 43 6f 6e  5HashNew(Fts5Con
44c0: 66 69 67 2a 2c 20 46 74 73 35 48 61 73 68 2a 2a  fig*, Fts5Hash**
44d0: 2c 20 69 6e 74 20 2a 70 6e 53 69 7a 65 29 3b 0a  , int *pnSize);.
44e0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
44f0: 48 61 73 68 46 72 65 65 28 46 74 73 35 48 61 73  HashFree(Fts5Has
4500: 68 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  h*);..int sqlite
4510: 33 46 74 73 35 48 61 73 68 57 72 69 74 65 28 0a  3Fts5HashWrite(.
4520: 20 20 46 74 73 35 48 61 73 68 2a 2c 0a 20 20 69    Fts5Hash*,.  i
4530: 36 34 20 69 52 6f 77 69 64 2c 20 20 20 20 20 20  64 iRowid,      
4540: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
4550: 2a 20 52 6f 77 69 64 20 66 6f 72 20 74 68 69 73  * Rowid for this
4560: 20 65 6e 74 72 79 20 2a 2f 0a 20 20 69 6e 74 20   entry */.  int 
4570: 69 43 6f 6c 2c 20 20 20 20 20 20 20 20 20 20 20  iCol,           
4580: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43              /* C
4590: 6f 6c 75 6d 6e 20 74 6f 6b 65 6e 20 61 70 70 65  olumn token appe
45a0: 61 72 73 20 69 6e 20 28 2d 76 65 20 2d 3e 20 64  ars in (-ve -> d
45b0: 65 6c 65 74 65 29 20 2a 2f 0a 20 20 69 6e 74 20  elete) */.  int 
45c0: 69 50 6f 73 2c 20 20 20 20 20 20 20 20 20 20 20  iPos,           
45d0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50              /* P
45e0: 6f 73 69 74 69 6f 6e 20 6f 66 20 74 6f 6b 65 6e  osition of token
45f0: 20 77 69 74 68 69 6e 20 63 6f 6c 75 6d 6e 20 2a   within column *
4600: 2f 0a 20 20 63 68 61 72 20 62 42 79 74 65 2c 0a  /.  char bByte,.
4610: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54    const char *pT
4620: 6f 6b 65 6e 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e  oken, int nToken
4630: 20 20 2f 2a 20 54 6f 6b 65 6e 20 74 6f 20 61 64    /* Token to ad
4640: 64 20 6f 72 20 72 65 6d 6f 76 65 20 74 6f 20 6f  d or remove to o
4650: 72 20 66 72 6f 6d 20 69 6e 64 65 78 20 2a 2f 0a  r from index */.
4660: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6d 70 74 79 20  );../*.** Empty 
4670: 28 62 75 74 20 64 6f 20 6e 6f 74 20 64 65 6c 65  (but do not dele
4680: 74 65 29 20 61 20 68 61 73 68 20 74 61 62 6c 65  te) a hash table
4690: 2e 0a 2a 2f 0a 76 6f 69 64 20 73 71 6c 69 74 65  ..*/.void sqlite
46a0: 33 46 74 73 35 48 61 73 68 43 6c 65 61 72 28 46  3Fts5HashClear(F
46b0: 74 73 35 48 61 73 68 2a 29 3b 0a 0a 69 6e 74 20  ts5Hash*);..int 
46c0: 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 51  sqlite3Fts5HashQ
46d0: 75 65 72 79 28 0a 20 20 46 74 73 35 48 61 73 68  uery(.  Fts5Hash
46e0: 2a 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20  *,              
46f0: 20 20 20 20 20 20 20 20 2f 2a 20 48 61 73 68 20          /* Hash 
4700: 74 61 62 6c 65 20 74 6f 20 71 75 65 72 79 20 2a  table to query *
4710: 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  /.  const char *
4720: 70 54 65 72 6d 2c 20 69 6e 74 20 6e 54 65 72 6d  pTerm, int nTerm
4730: 2c 20 20 20 2f 2a 20 51 75 65 72 79 20 74 65 72  ,   /* Query ter
4740: 6d 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20  m */.  const u8 
4750: 2a 2a 70 70 44 6f 63 6c 69 73 74 2c 20 20 20 20  **ppDoclist,    
4760: 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 50         /* OUT: P
4770: 6f 69 6e 74 65 72 20 74 6f 20 64 6f 63 6c 69 73  ointer to doclis
4780: 74 20 66 6f 72 20 70 54 65 72 6d 20 2a 2f 0a 20  t for pTerm */. 
4790: 20 69 6e 74 20 2a 70 6e 44 6f 63 6c 69 73 74 20   int *pnDoclist 
47a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
47b0: 20 2f 2a 20 4f 55 54 3a 20 53 69 7a 65 20 6f 66   /* OUT: Size of
47c0: 20 64 6f 63 6c 69 73 74 20 69 6e 20 62 79 74 65   doclist in byte
47d0: 73 20 2a 2f 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c  s */.);..int sql
47e0: 69 74 65 33 46 74 73 35 48 61 73 68 53 63 61 6e  ite3Fts5HashScan
47f0: 49 6e 69 74 28 0a 20 20 46 74 73 35 48 61 73 68  Init(.  Fts5Hash
4800: 2a 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20  *,              
4810: 20 20 20 20 20 20 20 20 2f 2a 20 48 61 73 68 20          /* Hash 
4820: 74 61 62 6c 65 20 74 6f 20 71 75 65 72 79 20 2a  table to query *
4830: 2f 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  /.  const char *
4840: 70 54 65 72 6d 2c 20 69 6e 74 20 6e 54 65 72 6d  pTerm, int nTerm
4850: 20 20 20 20 2f 2a 20 51 75 65 72 79 20 70 72 65      /* Query pre
4860: 66 69 78 20 2a 2f 0a 29 3b 0a 76 6f 69 64 20 73  fix */.);.void s
4870: 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 53 63  qlite3Fts5HashSc
4880: 61 6e 4e 65 78 74 28 46 74 73 35 48 61 73 68 2a  anNext(Fts5Hash*
4890: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  );.int sqlite3Ft
48a0: 73 35 48 61 73 68 53 63 61 6e 45 6f 66 28 46 74  s5HashScanEof(Ft
48b0: 73 35 48 61 73 68 2a 29 3b 0a 76 6f 69 64 20 73  s5Hash*);.void s
48c0: 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 53 63  qlite3Fts5HashSc
48d0: 61 6e 45 6e 74 72 79 28 46 74 73 35 48 61 73 68  anEntry(Fts5Hash
48e0: 20 2a 2c 0a 20 20 63 6f 6e 73 74 20 63 68 61 72   *,.  const char
48f0: 20 2a 2a 70 7a 54 65 72 6d 2c 20 20 20 20 20 20   **pzTerm,      
4900: 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 74 65        /* OUT: te
4910: 72 6d 20 28 6e 75 6c 2d 74 65 72 6d 69 6e 61 74  rm (nul-terminat
4920: 65 64 29 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 75  ed) */.  const u
4930: 38 20 2a 2a 70 70 44 6f 63 6c 69 73 74 2c 20 20  8 **ppDoclist,  
4940: 20 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a           /* OUT:
4950: 20 70 6f 69 6e 74 65 72 20 74 6f 20 64 6f 63 6c   pointer to docl
4960: 69 73 74 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 6e  ist */.  int *pn
4970: 44 6f 63 6c 69 73 74 20 20 20 20 20 20 20 20 20  Doclist         
4980: 20 20 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a           /* OUT:
4990: 20 73 69 7a 65 20 6f 66 20 64 6f 63 6c 69 73 74   size of doclist
49a0: 20 69 6e 20 62 79 74 65 73 20 2a 2f 0a 29 3b 0a   in bytes */.);.
49b0: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
49c0: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
49d0: 20 69 6e 20 66 74 73 35 5f 68 61 73 68 2e 63 2e   in fts5_hash.c.
49e0: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  .***************
49f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a  ***********/../*
4a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74  *********.** Int
4a80: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69  erface to code i
4a90: 6e 20 66 74 73 35 5f 73 74 6f 72 61 67 65 2e 63  n fts5_storage.c
4aa0: 2e 20 66 74 73 35 5f 73 74 6f 72 61 67 65 2e 63  . fts5_storage.c
4ab0: 20 63 6f 6e 74 61 69 6e 73 20 63 6f 6e 74 61 69   contains contai
4ac0: 6e 73 20 0a 2a 2a 20 63 6f 64 65 20 74 6f 20 61  ns .** code to a
4ad0: 63 63 65 73 73 20 74 68 65 20 64 61 74 61 20 73  ccess the data s
4ae0: 74 6f 72 65 64 20 69 6e 20 74 68 65 20 25 5f 63  tored in the %_c
4af0: 6f 6e 74 65 6e 74 20 61 6e 64 20 25 5f 64 6f 63  ontent and %_doc
4b00: 73 69 7a 65 20 74 61 62 6c 65 73 2e 0a 2a 2f 0a  size tables..*/.
4b10: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53 54  .#define FTS5_ST
4b20: 4d 54 5f 53 43 41 4e 5f 41 53 43 20 20 30 20 20  MT_SCAN_ASC  0  
4b30: 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77     /* SELECT row
4b40: 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f  id, * FROM ... O
4b50: 52 44 45 52 20 42 59 20 31 20 41 53 43 20 2a 2f  RDER BY 1 ASC */
4b60: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53 54  .#define FTS5_ST
4b70: 4d 54 5f 53 43 41 4e 5f 44 45 53 43 20 31 20 20  MT_SCAN_DESC 1  
4b80: 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77     /* SELECT row
4b90: 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f  id, * FROM ... O
4ba0: 52 44 45 52 20 42 59 20 31 20 44 45 53 43 20 2a  RDER BY 1 DESC *
4bb0: 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 53  /.#define FTS5_S
4bc0: 54 4d 54 5f 4c 4f 4f 4b 55 50 20 20 20 20 32 20  TMT_LOOKUP    2 
4bd0: 20 20 20 20 2f 2a 20 53 45 4c 45 43 54 20 72 6f      /* SELECT ro
4be0: 77 69 64 2c 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20  wid, * FROM ... 
4bf0: 57 48 45 52 45 20 72 6f 77 69 64 3d 3f 20 2a 2f  WHERE rowid=? */
4c00: 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74  ..typedef struct
4c10: 20 46 74 73 35 53 74 6f 72 61 67 65 20 46 74 73   Fts5Storage Fts
4c20: 35 53 74 6f 72 61 67 65 3b 0a 0a 69 6e 74 20 73  5Storage;..int s
4c30: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
4c40: 65 4f 70 65 6e 28 46 74 73 35 43 6f 6e 66 69 67  eOpen(Fts5Config
4c50: 2a 2c 20 46 74 73 35 49 6e 64 65 78 2a 2c 20 69  *, Fts5Index*, i
4c60: 6e 74 2c 20 46 74 73 35 53 74 6f 72 61 67 65 2a  nt, Fts5Storage*
4c70: 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 69 6e 74 20  *, char**);.int 
4c80: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4c90: 67 65 43 6c 6f 73 65 28 46 74 73 35 53 74 6f 72  geClose(Fts5Stor
4ca0: 61 67 65 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c  age *p);.int sql
4cb0: 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 52  ite3Fts5StorageR
4cc0: 65 6e 61 6d 65 28 46 74 73 35 53 74 6f 72 61 67  ename(Fts5Storag
4cd0: 65 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  e*, const char *
4ce0: 7a 4e 61 6d 65 29 3b 0a 0a 69 6e 74 20 73 71 6c  zName);..int sql
4cf0: 69 74 65 33 46 74 73 35 44 72 6f 70 41 6c 6c 28  ite3Fts5DropAll(
4d00: 46 74 73 35 43 6f 6e 66 69 67 2a 29 3b 0a 69 6e  Fts5Config*);.in
4d10: 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 72 65  t sqlite3Fts5Cre
4d20: 61 74 65 54 61 62 6c 65 28 46 74 73 35 43 6f 6e  ateTable(Fts5Con
4d30: 66 69 67 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72  fig*, const char
4d40: 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20  *, const char*, 
4d50: 69 6e 74 2c 20 63 68 61 72 20 2a 2a 29 3b 0a 0a  int, char **);..
4d60: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4d70: 74 6f 72 61 67 65 44 65 6c 65 74 65 28 46 74 73  torageDelete(Fts
4d80: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 36 34  5Storage *p, i64
4d90: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a  , sqlite3_value*
4da0: 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  *);.int sqlite3F
4db0: 74 73 35 53 74 6f 72 61 67 65 43 6f 6e 74 65 6e  ts5StorageConten
4dc0: 74 49 6e 73 65 72 74 28 46 74 73 35 53 74 6f 72  tInsert(Fts5Stor
4dd0: 61 67 65 20 2a 70 2c 20 73 71 6c 69 74 65 33 5f  age *p, sqlite3_
4de0: 76 61 6c 75 65 2a 2a 2c 20 69 36 34 2a 29 3b 0a  value**, i64*);.
4df0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4e00: 74 6f 72 61 67 65 49 6e 64 65 78 49 6e 73 65 72  torageIndexInser
4e10: 74 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70  t(Fts5Storage *p
4e20: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a  , sqlite3_value*
4e30: 2a 2c 20 69 36 34 29 3b 0a 0a 69 6e 74 20 73 71  *, i64);..int sq
4e40: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65  lite3Fts5Storage
4e50: 49 6e 74 65 67 72 69 74 79 28 46 74 73 35 53 74  Integrity(Fts5St
4e60: 6f 72 61 67 65 20 2a 70 29 3b 0a 0a 69 6e 74 20  orage *p);..int 
4e70: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4e80: 67 65 53 74 6d 74 28 46 74 73 35 53 74 6f 72 61  geStmt(Fts5Stora
4e90: 67 65 20 2a 70 2c 20 69 6e 74 20 65 53 74 6d 74  ge *p, int eStmt
4ea0: 2c 20 73 71 6c 69 74 65 33 5f 73 74 6d 74 2a 2a  , sqlite3_stmt**
4eb0: 2c 20 63 68 61 72 2a 2a 29 3b 0a 76 6f 69 64 20  , char**);.void 
4ec0: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4ed0: 67 65 53 74 6d 74 52 65 6c 65 61 73 65 28 46 74  geStmtRelease(Ft
4ee0: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e  s5Storage *p, in
4ef0: 74 20 65 53 74 6d 74 2c 20 73 71 6c 69 74 65 33  t eStmt, sqlite3
4f00: 5f 73 74 6d 74 2a 29 3b 0a 0a 69 6e 74 20 73 71  _stmt*);..int sq
4f10: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65  lite3Fts5Storage
4f20: 44 6f 63 73 69 7a 65 28 46 74 73 35 53 74 6f 72  Docsize(Fts5Stor
4f30: 61 67 65 20 2a 70 2c 20 69 36 34 20 69 52 6f 77  age *p, i64 iRow
4f40: 69 64 2c 20 69 6e 74 20 2a 61 43 6f 6c 29 3b 0a  id, int *aCol);.
4f50: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4f60: 74 6f 72 61 67 65 53 69 7a 65 28 46 74 73 35 53  torageSize(Fts5S
4f70: 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 69  torage *p, int i
4f80: 43 6f 6c 2c 20 69 36 34 20 2a 70 6e 41 76 67 29  Col, i64 *pnAvg)
4f90: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
4fa0: 35 53 74 6f 72 61 67 65 52 6f 77 43 6f 75 6e 74  5StorageRowCount
4fb0: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c  (Fts5Storage *p,
4fc0: 20 69 36 34 20 2a 70 6e 52 6f 77 29 3b 0a 0a 69   i64 *pnRow);..i
4fd0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74  nt sqlite3Fts5St
4fe0: 6f 72 61 67 65 53 79 6e 63 28 46 74 73 35 53 74  orageSync(Fts5St
4ff0: 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 62 43  orage *p, int bC
5000: 6f 6d 6d 69 74 29 3b 0a 69 6e 74 20 73 71 6c 69  ommit);.int sqli
5010: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 52 6f  te3Fts5StorageRo
5020: 6c 6c 62 61 63 6b 28 46 74 73 35 53 74 6f 72 61  llback(Fts5Stora
5030: 67 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c  ge *p);..int sql
5040: 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 43  ite3Fts5StorageC
5050: 6f 6e 66 69 67 56 61 6c 75 65 28 0a 20 20 20 20  onfigValue(.    
5060: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20  Fts5Storage *p, 
5070: 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20 73 71 6c  const char*, sql
5080: 69 74 65 33 5f 76 61 6c 75 65 2a 2c 20 69 6e 74  ite3_value*, int
5090: 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .);..int sqlite3
50a0: 46 74 73 35 53 74 6f 72 61 67 65 44 65 6c 65 74  Fts5StorageDelet
50b0: 65 41 6c 6c 28 46 74 73 35 53 74 6f 72 61 67 65  eAll(Fts5Storage
50c0: 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65   *p);.int sqlite
50d0: 33 46 74 73 35 53 74 6f 72 61 67 65 52 65 62 75  3Fts5StorageRebu
50e0: 69 6c 64 28 46 74 73 35 53 74 6f 72 61 67 65 20  ild(Fts5Storage 
50f0: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  *p);.int sqlite3
5100: 46 74 73 35 53 74 6f 72 61 67 65 4f 70 74 69 6d  Fts5StorageOptim
5110: 69 7a 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ize(Fts5Storage 
5120: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  *p);.int sqlite3
5130: 46 74 73 35 53 74 6f 72 61 67 65 4d 65 72 67 65  Fts5StorageMerge
5140: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c  (Fts5Storage *p,
5150: 20 69 6e 74 20 6e 4d 65 72 67 65 29 3b 0a 69 6e   int nMerge);.in
5160: 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f  t sqlite3Fts5Sto
5170: 72 61 67 65 52 65 73 65 74 28 46 74 73 35 53 74  rageReset(Fts5St
5180: 6f 72 61 67 65 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a  orage *p);../*.*
5190: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61  * End of interfa
51a0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
51b0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 2e 0a 2a 2a  s5_storage.c..**
51c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5200: 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a  ********/.../***
5210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5250: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72  *******.** Inter
5260: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
5270: 66 74 73 35 5f 65 78 70 72 2e 63 2e 20 0a 2a 2f  fts5_expr.c. .*/
5280: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20  .typedef struct 
5290: 46 74 73 35 45 78 70 72 20 46 74 73 35 45 78 70  Fts5Expr Fts5Exp
52a0: 72 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63  r;.typedef struc
52b0: 74 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 46  t Fts5ExprNode F
52c0: 74 73 35 45 78 70 72 4e 6f 64 65 3b 0a 74 79 70  ts5ExprNode;.typ
52d0: 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35  edef struct Fts5
52e0: 50 61 72 73 65 20 46 74 73 35 50 61 72 73 65 3b  Parse Fts5Parse;
52f0: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20  .typedef struct 
5300: 46 74 73 35 54 6f 6b 65 6e 20 46 74 73 35 54 6f  Fts5Token Fts5To
5310: 6b 65 6e 3b 0a 74 79 70 65 64 65 66 20 73 74 72  ken;.typedef str
5320: 75 63 74 20 46 74 73 35 45 78 70 72 50 68 72 61  uct Fts5ExprPhra
5330: 73 65 20 46 74 73 35 45 78 70 72 50 68 72 61 73  se Fts5ExprPhras
5340: 65 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63  e;.typedef struc
5350: 74 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65  t Fts5ExprNearse
5360: 74 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65  t Fts5ExprNearse
5370: 74 3b 0a 0a 73 74 72 75 63 74 20 46 74 73 35 54  t;..struct Fts5T
5380: 6f 6b 65 6e 20 7b 0a 20 20 63 6f 6e 73 74 20 63  oken {.  const c
5390: 68 61 72 20 2a 70 3b 20 20 20 20 20 20 20 20 20  har *p;         
53a0: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 6f 6b 65           /* Toke
53b0: 6e 20 74 65 78 74 20 28 6e 6f 74 20 4e 55 4c 4c  n text (not NULL
53c0: 20 74 65 72 6d 69 6e 61 74 65 64 29 20 2a 2f 0a   terminated) */.
53d0: 20 20 69 6e 74 20 6e 3b 20 20 20 20 20 20 20 20    int n;        
53e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
53f0: 20 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62 75 66    /* Size of buf
5400: 66 65 72 20 70 20 69 6e 20 62 79 74 65 73 20 2a  fer p in bytes *
5410: 2f 0a 7d 3b 0a 0a 2f 2a 20 50 61 72 73 65 20 61  /.};../* Parse a
5420: 20 4d 41 54 43 48 20 65 78 70 72 65 73 73 69 6f   MATCH expressio
5430: 6e 2e 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  n. */.int sqlite
5440: 33 46 74 73 35 45 78 70 72 4e 65 77 28 0a 20 20  3Fts5ExprNew(.  
5450: 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e  Fts5Config *pCon
5460: 66 69 67 2c 20 0a 20 20 63 6f 6e 73 74 20 63 68  fig, .  const ch
5470: 61 72 20 2a 7a 45 78 70 72 2c 0a 20 20 46 74 73  ar *zExpr,.  Fts
5480: 35 45 78 70 72 20 2a 2a 70 70 4e 65 77 2c 20 0a  5Expr **ppNew, .
5490: 20 20 63 68 61 72 20 2a 2a 70 7a 45 72 72 0a 29    char **pzErr.)
54a0: 3b 0a 0a 2f 2a 0a 2a 2a 20 66 6f 72 28 72 63 20  ;../*.** for(rc 
54b0: 3d 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  = sqlite3Fts5Exp
54c0: 72 46 69 72 73 74 28 70 45 78 70 72 2c 20 70 49  rFirst(pExpr, pI
54d0: 64 78 2c 20 62 44 65 73 63 29 3b 0a 2a 2a 20 20  dx, bDesc);.**  
54e0: 20 20 20 72 63 3d 3d 53 51 4c 49 54 45 5f 4f 4b     rc==SQLITE_OK
54f0: 20 26 26 20 30 3d 3d 73 71 6c 69 74 65 33 46 74   && 0==sqlite3Ft
5500: 73 35 45 78 70 72 45 6f 66 28 70 45 78 70 72 29  s5ExprEof(pExpr)
5510: 3b 0a 2a 2a 20 20 20 20 20 72 63 20 3d 20 73 71  ;.**     rc = sq
5520: 6c 69 74 65 33 46 74 73 35 45 78 70 72 4e 65 78  lite3Fts5ExprNex
5530: 74 28 70 45 78 70 72 29 0a 2a 2a 20 29 7b 0a 2a  t(pExpr).** ){.*
5540: 2a 20 20 20 2f 2f 20 54 68 65 20 64 6f 63 75 6d  *   // The docum
5550: 65 6e 74 20 77 69 74 68 20 72 6f 77 69 64 20 69  ent with rowid i
5560: 52 6f 77 69 64 20 6d 61 74 63 68 65 73 20 74 68  Rowid matches th
5570: 65 20 65 78 70 72 65 73 73 69 6f 6e 21 0a 2a 2a  e expression!.**
5580: 20 20 20 69 36 34 20 69 52 6f 77 69 64 20 3d 20     i64 iRowid = 
5590: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 52  sqlite3Fts5ExprR
55a0: 6f 77 69 64 28 70 45 78 70 72 29 3b 0a 2a 2a 20  owid(pExpr);.** 
55b0: 7d 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  }.*/.int sqlite3
55c0: 46 74 73 35 45 78 70 72 46 69 72 73 74 28 46 74  Fts5ExprFirst(Ft
55d0: 73 35 45 78 70 72 2a 2c 20 46 74 73 35 49 6e 64  s5Expr*, Fts5Ind
55e0: 65 78 20 2a 70 49 64 78 2c 20 69 36 34 20 69 4d  ex *pIdx, i64 iM
55f0: 69 6e 2c 20 69 6e 74 20 62 44 65 73 63 29 3b 0a  in, int bDesc);.
5600: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45  int sqlite3Fts5E
5610: 78 70 72 4e 65 78 74 28 46 74 73 35 45 78 70 72  xprNext(Fts5Expr
5620: 2a 2c 20 69 36 34 20 69 4d 61 78 29 3b 0a 69 6e  *, i64 iMax);.in
5630: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  t sqlite3Fts5Exp
5640: 72 45 6f 66 28 46 74 73 35 45 78 70 72 2a 29 3b  rEof(Fts5Expr*);
5650: 0a 69 36 34 20 73 71 6c 69 74 65 33 46 74 73 35  .i64 sqlite3Fts5
5660: 45 78 70 72 52 6f 77 69 64 28 46 74 73 35 45 78  ExprRowid(Fts5Ex
5670: 70 72 2a 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69  pr*);..void sqli
5680: 74 65 33 46 74 73 35 45 78 70 72 46 72 65 65 28  te3Fts5ExprFree(
5690: 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a 2f 2a 20  Fts5Expr*);../* 
56a0: 43 61 6c 6c 65 64 20 64 75 72 69 6e 67 20 73 74  Called during st
56b0: 61 72 74 75 70 20 74 6f 20 72 65 67 69 73 74 65  artup to registe
56c0: 72 20 61 20 55 44 46 20 77 69 74 68 20 53 51 4c  r a UDF with SQL
56d0: 69 74 65 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  ite */.int sqlit
56e0: 65 33 46 74 73 35 45 78 70 72 49 6e 69 74 28 46  e3Fts5ExprInit(F
56f0: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69  ts5Global*, sqli
5700: 74 65 33 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  te3*);..int sqli
5710: 74 65 33 46 74 73 35 45 78 70 72 50 68 72 61 73  te3Fts5ExprPhras
5720: 65 43 6f 75 6e 74 28 46 74 73 35 45 78 70 72 2a  eCount(Fts5Expr*
5730: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  );.int sqlite3Ft
5740: 73 35 45 78 70 72 50 68 72 61 73 65 53 69 7a 65  s5ExprPhraseSize
5750: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 20  (Fts5Expr*, int 
5760: 69 50 68 72 61 73 65 29 3b 0a 69 6e 74 20 73 71  iPhrase);.int sq
5770: 6c 69 74 65 33 46 74 73 35 45 78 70 72 50 6f 73  lite3Fts5ExprPos
5780: 6c 69 73 74 28 46 74 73 35 45 78 70 72 2a 2c 20  list(Fts5Expr*, 
5790: 69 6e 74 2c 20 63 6f 6e 73 74 20 75 38 20 2a 2a  int, const u8 **
57a0: 29 3b 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75  );..typedef stru
57b0: 63 74 20 46 74 73 35 50 6f 73 6c 69 73 74 50 6f  ct Fts5PoslistPo
57c0: 70 75 6c 61 74 6f 72 20 46 74 73 35 50 6f 73 6c  pulator Fts5Posl
57d0: 69 73 74 50 6f 70 75 6c 61 74 6f 72 3b 0a 46 74  istPopulator;.Ft
57e0: 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61 74  s5PoslistPopulat
57f0: 6f 72 20 2a 73 71 6c 69 74 65 33 46 74 73 35 45  or *sqlite3Fts5E
5800: 78 70 72 43 6c 65 61 72 50 6f 73 6c 69 73 74 73  xprClearPoslists
5810: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 29  (Fts5Expr*, int)
5820: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
5830: 35 45 78 70 72 50 6f 70 75 6c 61 74 65 50 6f 73  5ExprPopulatePos
5840: 6c 69 73 74 73 28 0a 20 20 20 20 46 74 73 35 43  lists(.    Fts5C
5850: 6f 6e 66 69 67 2a 2c 20 46 74 73 35 45 78 70 72  onfig*, Fts5Expr
5860: 2a 2c 20 46 74 73 35 50 6f 73 6c 69 73 74 50 6f  *, Fts5PoslistPo
5870: 70 75 6c 61 74 6f 72 2a 2c 20 69 6e 74 2c 20 63  pulator*, int, c
5880: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 0a  onst char*, int.
5890: 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  );.void sqlite3F
58a0: 74 73 35 45 78 70 72 43 68 65 63 6b 50 6f 73 6c  ts5ExprCheckPosl
58b0: 69 73 74 73 28 46 74 73 35 45 78 70 72 2a 2c 20  ists(Fts5Expr*, 
58c0: 69 36 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  i64);.void sqlit
58d0: 65 33 46 74 73 35 45 78 70 72 43 6c 65 61 72 45  e3Fts5ExprClearE
58e0: 6f 66 28 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a  of(Fts5Expr*);..
58f0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45  int sqlite3Fts5E
5900: 78 70 72 43 6c 6f 6e 65 50 68 72 61 73 65 28 46  xprClonePhrase(F
5910: 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 2c 20 46  ts5Expr*, int, F
5920: 74 73 35 45 78 70 72 2a 2a 29 3b 0a 0a 69 6e 74  ts5Expr**);..int
5930: 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72   sqlite3Fts5Expr
5940: 50 68 72 61 73 65 43 6f 6c 6c 69 73 74 28 46 74  PhraseCollist(Ft
5950: 73 35 45 78 70 72 20 2a 2c 20 69 6e 74 2c 20 63  s5Expr *, int, c
5960: 6f 6e 73 74 20 75 38 20 2a 2a 2c 20 69 6e 74 20  onst u8 **, int 
5970: 2a 29 3b 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  *);../**********
5980: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5990: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
59a0: 2a 0a 2a 2a 20 54 68 65 20 66 74 73 35 5f 65 78  *.** The fts5_ex
59b0: 70 72 2e 63 20 41 50 49 20 61 62 6f 76 65 20 74  pr.c API above t
59c0: 68 69 73 20 70 6f 69 6e 74 20 69 73 20 75 73 65  his point is use
59d0: 64 20 62 79 20 74 68 65 20 6f 74 68 65 72 20 68  d by the other h
59e0: 61 6e 64 2d 77 72 69 74 74 65 6e 0a 2a 2a 20 43  and-written.** C
59f0: 20 63 6f 64 65 20 69 6e 20 74 68 69 73 20 6d 6f   code in this mo
5a00: 64 75 6c 65 2e 20 54 68 65 20 69 6e 74 65 72 66  dule. The interf
5a10: 61 63 65 73 20 62 65 6c 6f 77 20 74 68 69 73 20  aces below this 
5a20: 70 6f 69 6e 74 20 61 72 65 20 63 61 6c 6c 65 64  point are called
5a30: 20 62 79 0a 2a 2a 20 74 68 65 20 70 61 72 73 65   by.** the parse
5a40: 72 20 63 6f 64 65 20 69 6e 20 66 74 73 35 70 61  r code in fts5pa
5a50: 72 73 65 2e 79 2e 20 20 2a 2f 0a 0a 76 6f 69 64  rse.y.  */..void
5a60: 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73   sqlite3Fts5Pars
5a70: 65 45 72 72 6f 72 28 46 74 73 35 50 61 72 73 65  eError(Fts5Parse
5a80: 20 2a 70 50 61 72 73 65 2c 20 63 6f 6e 73 74 20   *pParse, const 
5a90: 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29  char *zFmt, ...)
5aa0: 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64 65 20  ;..Fts5ExprNode 
5ab0: 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73  *sqlite3Fts5Pars
5ac0: 65 4e 6f 64 65 28 0a 20 20 46 74 73 35 50 61 72  eNode(.  Fts5Par
5ad0: 73 65 20 2a 70 50 61 72 73 65 2c 0a 20 20 69 6e  se *pParse,.  in
5ae0: 74 20 65 54 79 70 65 2c 0a 20 20 46 74 73 35 45  t eType,.  Fts5E
5af0: 78 70 72 4e 6f 64 65 20 2a 70 4c 65 66 74 2c 0a  xprNode *pLeft,.
5b00: 20 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a    Fts5ExprNode *
5b10: 70 52 69 67 68 74 2c 0a 20 20 46 74 73 35 45 78  pRight,.  Fts5Ex
5b20: 70 72 4e 65 61 72 73 65 74 20 2a 70 4e 65 61 72  prNearset *pNear
5b30: 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64  .);..Fts5ExprNod
5b40: 65 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61  e *sqlite3Fts5Pa
5b50: 72 73 65 49 6d 70 6c 69 63 69 74 41 6e 64 28 0a  rseImplicitAnd(.
5b60: 20 20 46 74 73 35 50 61 72 73 65 20 2a 70 50 61    Fts5Parse *pPa
5b70: 72 73 65 2c 0a 20 20 46 74 73 35 45 78 70 72 4e  rse,.  Fts5ExprN
5b80: 6f 64 65 20 2a 70 4c 65 66 74 2c 0a 20 20 46 74  ode *pLeft,.  Ft
5b90: 73 35 45 78 70 72 4e 6f 64 65 20 2a 70 52 69 67  s5ExprNode *pRig
5ba0: 68 74 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 50  ht.);..Fts5ExprP
5bb0: 68 72 61 73 65 20 2a 73 71 6c 69 74 65 33 46 74  hrase *sqlite3Ft
5bc0: 73 35 50 61 72 73 65 54 65 72 6d 28 0a 20 20 46  s5ParseTerm(.  F
5bd0: 74 73 35 50 61 72 73 65 20 2a 70 50 61 72 73 65  ts5Parse *pParse
5be0: 2c 20 0a 20 20 46 74 73 35 45 78 70 72 50 68 72  , .  Fts5ExprPhr
5bf0: 61 73 65 20 2a 70 50 68 72 61 73 65 2c 20 0a 20  ase *pPhrase, . 
5c00: 20 46 74 73 35 54 6f 6b 65 6e 20 2a 70 54 6f 6b   Fts5Token *pTok
5c10: 65 6e 2c 0a 20 20 69 6e 74 20 62 50 72 65 66 69  en,.  int bPrefi
5c20: 78 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 65  x.);..Fts5ExprNe
5c30: 61 72 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74  arset *sqlite3Ft
5c40: 73 35 50 61 72 73 65 4e 65 61 72 73 65 74 28 0a  s5ParseNearset(.
5c50: 20 20 46 74 73 35 50 61 72 73 65 2a 2c 20 0a 20    Fts5Parse*, . 
5c60: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74   Fts5ExprNearset
5c70: 2a 2c 0a 20 20 46 74 73 35 45 78 70 72 50 68 72  *,.  Fts5ExprPhr
5c80: 61 73 65 2a 20 0a 29 3b 0a 0a 46 74 73 35 43 6f  ase* .);..Fts5Co
5c90: 6c 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73  lset *sqlite3Fts
5ca0: 35 50 61 72 73 65 43 6f 6c 73 65 74 28 0a 20 20  5ParseColset(.  
5cb0: 46 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 20 46  Fts5Parse*, .  F
5cc0: 74 73 35 43 6f 6c 73 65 74 2a 2c 20 0a 20 20 46  ts5Colset*, .  F
5cd0: 74 73 35 54 6f 6b 65 6e 20 2a 0a 29 3b 0a 0a 76  ts5Token *.);..v
5ce0: 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50  oid sqlite3Fts5P
5cf0: 61 72 73 65 50 68 72 61 73 65 46 72 65 65 28 46  arsePhraseFree(F
5d00: 74 73 35 45 78 70 72 50 68 72 61 73 65 2a 29 3b  ts5ExprPhrase*);
5d10: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
5d20: 35 50 61 72 73 65 4e 65 61 72 73 65 74 46 72 65  5ParseNearsetFre
5d30: 65 28 46 74 73 35 45 78 70 72 4e 65 61 72 73 65  e(Fts5ExprNearse
5d40: 74 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65  t*);.void sqlite
5d50: 33 46 74 73 35 50 61 72 73 65 4e 6f 64 65 46 72  3Fts5ParseNodeFr
5d60: 65 65 28 46 74 73 35 45 78 70 72 4e 6f 64 65 2a  ee(Fts5ExprNode*
5d70: 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  );..void sqlite3
5d80: 46 74 73 35 50 61 72 73 65 53 65 74 44 69 73 74  Fts5ParseSetDist
5d90: 61 6e 63 65 28 46 74 73 35 50 61 72 73 65 2a 2c  ance(Fts5Parse*,
5da0: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74   Fts5ExprNearset
5db0: 2a 2c 20 46 74 73 35 54 6f 6b 65 6e 2a 29 3b 0a  *, Fts5Token*);.
5dc0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
5dd0: 50 61 72 73 65 53 65 74 43 6f 6c 73 65 74 28 46  ParseSetColset(F
5de0: 74 73 35 50 61 72 73 65 2a 2c 20 46 74 73 35 45  ts5Parse*, Fts5E
5df0: 78 70 72 4e 65 61 72 73 65 74 2a 2c 20 46 74 73  xprNearset*, Fts
5e00: 35 43 6f 6c 73 65 74 2a 29 3b 0a 76 6f 69 64 20  5Colset*);.void 
5e10: 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65  sqlite3Fts5Parse
5e20: 46 69 6e 69 73 68 65 64 28 46 74 73 35 50 61 72  Finished(Fts5Par
5e30: 73 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35  se *pParse, Fts5
5e40: 45 78 70 72 4e 6f 64 65 20 2a 70 29 3b 0a 76 6f  ExprNode *p);.vo
5e50: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61  id sqlite3Fts5Pa
5e60: 72 73 65 4e 65 61 72 28 46 74 73 35 50 61 72 73  rseNear(Fts5Pars
5e70: 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 54  e *pParse, Fts5T
5e80: 6f 6b 65 6e 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45  oken*);../*.** E
5e90: 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20  nd of interface 
5ea0: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  to code in fts5_
5eb0: 65 78 70 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  expr.c..********
5ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f00: 2a 2a 2f 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a  **/..../********
5f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f50: 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20  **.** Interface 
5f60: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  to code in fts5_
5f70: 61 75 78 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74 20  aux.c. .*/..int 
5f80: 73 71 6c 69 74 65 33 46 74 73 35 41 75 78 49 6e  sqlite3Fts5AuxIn
5f90: 69 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f  it(fts5_api*);./
5fa0: 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65  *.** End of inte
5fb0: 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e  rface to code in
5fc0: 20 66 74 73 35 5f 61 75 78 2e 63 2e 0a 2a 2a 2a   fts5_aux.c..***
5fd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fe0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5ff0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6000: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6010: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
6020: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6030: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6040: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6050: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6060: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
6070: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
6080: 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 2e 20  s5_tokenizer.c. 
6090: 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .*/..int sqlite3
60a0: 46 74 73 35 54 6f 6b 65 6e 69 7a 65 72 49 6e 69  Fts5TokenizerIni
60b0: 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f 2a  t(fts5_api*);./*
60c0: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
60d0: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
60e0: 66 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63  fts5_tokenizer.c
60f0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
6100: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6110: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6120: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f  ************/../
6140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6170: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6180: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
6190: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
61a0: 69 6e 20 66 74 73 35 5f 76 6f 63 61 62 2e 63 2e  in fts5_vocab.c.
61b0: 20 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65   .*/..int sqlite
61c0: 33 46 74 73 35 56 6f 63 61 62 49 6e 69 74 28 46  3Fts5VocabInit(F
61d0: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69  ts5Global*, sqli
61e0: 74 65 33 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  te3*);../*.** En
61f0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
6200: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 76  o code in fts5_v
6210: 6f 63 61 62 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  ocab.c..********
6220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6260: 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  **/.../*********
6270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6290: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62b0: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
62c0: 6f 20 61 75 74 6f 6d 61 74 69 63 61 6c 6c 79 20  o automatically 
62d0: 67 65 6e 65 72 61 74 65 64 20 63 6f 64 65 20 69  generated code i
62e0: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e  n fts5_unicode2.
62f0: 63 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  c. .*/.int sqlit
6300: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 49 73 61  e3Fts5UnicodeIsa
6310: 6c 6e 75 6d 28 69 6e 74 20 63 29 3b 0a 69 6e 74  lnum(int c);.int
6320: 20 73 71 6c 69 74 65 33 46 74 73 35 55 6e 69 63   sqlite3Fts5Unic
6330: 6f 64 65 49 73 64 69 61 63 72 69 74 69 63 28 69  odeIsdiacritic(i
6340: 6e 74 20 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74  nt c);.int sqlit
6350: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 46 6f 6c  e3Fts5UnicodeFol
6360: 64 28 69 6e 74 20 63 2c 20 69 6e 74 20 62 52 65  d(int c, int bRe
6370: 6d 6f 76 65 44 69 61 63 72 69 74 69 63 29 3b 0a  moveDiacritic);.
6380: 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74  /*.** End of int
6390: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69  erface to code i
63a0: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e  n fts5_unicode2.
63b0: 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  c..*************
63c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
63d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
63e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
63f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a  *************/..
6400: 23 65 6e 64 69 66 0a                             #endif.