/ Hex Artifact Content
Login

Artifact 51eb867d9afbd1a4130fde00c39acf9aacabe1b6:


0000: 2f 2a 0a 2a 2a 20 32 30 31 34 20 4d 61 79 20 33  /*.** 2014 May 3
0010: 31 0a 2a 2a 0a 2a 2a 20 54 68 65 20 61 75 74 68  1.**.** The auth
0020: 6f 72 20 64 69 73 63 6c 61 69 6d 73 20 63 6f 70  or disclaims cop
0030: 79 72 69 67 68 74 20 74 6f 20 74 68 69 73 20 73  yright to this s
0040: 6f 75 72 63 65 20 63 6f 64 65 2e 20 20 49 6e 20  ource code.  In 
0050: 70 6c 61 63 65 20 6f 66 0a 2a 2a 20 61 20 6c 65  place of.** a le
0060: 67 61 6c 20 6e 6f 74 69 63 65 2c 20 68 65 72 65  gal notice, here
0070: 20 69 73 20 61 20 62 6c 65 73 73 69 6e 67 3a 0a   is a blessing:.
0080: 2a 2a 0a 2a 2a 20 20 20 20 4d 61 79 20 79 6f 75  **.**    May you
0090: 20 64 6f 20 67 6f 6f 64 20 61 6e 64 20 6e 6f 74   do good and not
00a0: 20 65 76 69 6c 2e 0a 2a 2a 20 20 20 20 4d 61 79   evil..**    May
00b0: 20 79 6f 75 20 66 69 6e 64 20 66 6f 72 67 69 76   you find forgiv
00c0: 65 6e 65 73 73 20 66 6f 72 20 79 6f 75 72 73 65  eness for yourse
00d0: 6c 66 20 61 6e 64 20 66 6f 72 67 69 76 65 20 6f  lf and forgive o
00e0: 74 68 65 72 73 2e 0a 2a 2a 20 20 20 20 4d 61 79  thers..**    May
00f0: 20 79 6f 75 20 73 68 61 72 65 20 66 72 65 65 6c   you share freel
0100: 79 2c 20 6e 65 76 65 72 20 74 61 6b 69 6e 67 20  y, never taking 
0110: 6d 6f 72 65 20 74 68 61 6e 20 79 6f 75 20 67 69  more than you gi
0120: 76 65 2e 0a 2a 2a 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ve..**.*********
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0170: 2a 2a 2a 2a 2a 0a 2a 2a 0a 2a 2f 0a 23 69 66 6e  *****.**.*/.#ifn
0180: 64 65 66 20 5f 46 54 53 35 49 4e 54 5f 48 0a 23  def _FTS5INT_H.#
0190: 64 65 66 69 6e 65 20 5f 46 54 53 35 49 4e 54 5f  define _FTS5INT_
01a0: 48 0a 0a 23 69 6e 63 6c 75 64 65 20 22 66 74 73  H..#include "fts
01b0: 35 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 73  5.h".#include "s
01c0: 71 6c 69 74 65 33 65 78 74 2e 68 22 0a 53 51 4c  qlite3ext.h".SQL
01d0: 49 54 45 5f 45 58 54 45 4e 53 49 4f 4e 5f 49 4e  ITE_EXTENSION_IN
01e0: 49 54 31 0a 0a 23 69 6e 63 6c 75 64 65 20 3c 73  IT1..#include <s
01f0: 74 72 69 6e 67 2e 68 3e 0a 23 69 6e 63 6c 75 64  tring.h>.#includ
0200: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 23 69  e <assert.h>..#i
0210: 66 6e 64 65 66 20 53 51 4c 49 54 45 5f 41 4d 41  fndef SQLITE_AMA
0220: 4c 47 41 4d 41 54 49 4f 4e 0a 0a 74 79 70 65 64  LGAMATION..typed
0230: 65 66 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72  ef unsigned char
0240: 20 20 75 38 3b 0a 74 79 70 65 64 65 66 20 75 6e    u8;.typedef un
0250: 73 69 67 6e 65 64 20 69 6e 74 20 20 20 75 33 32  signed int   u32
0260: 3b 0a 74 79 70 65 64 65 66 20 75 6e 73 69 67 6e  ;.typedef unsign
0270: 65 64 20 73 68 6f 72 74 20 75 31 36 3b 0a 74 79  ed short u16;.ty
0280: 70 65 64 65 66 20 73 68 6f 72 74 20 69 31 36 3b  pedef short i16;
0290: 0a 74 79 70 65 64 65 66 20 73 71 6c 69 74 65 33  .typedef sqlite3
02a0: 5f 69 6e 74 36 34 20 69 36 34 3b 0a 74 79 70 65  _int64 i64;.type
02b0: 64 65 66 20 73 71 6c 69 74 65 33 5f 75 69 6e 74  def sqlite3_uint
02c0: 36 34 20 75 36 34 3b 0a 0a 23 64 65 66 69 6e 65  64 u64;..#define
02d0: 20 41 72 72 61 79 53 69 7a 65 28 78 29 20 28 28   ArraySize(x) ((
02e0: 69 6e 74 29 28 73 69 7a 65 6f 66 28 78 29 20 2f  int)(sizeof(x) /
02f0: 20 73 69 7a 65 6f 66 28 78 5b 30 5d 29 29 29 0a   sizeof(x[0]))).
0300: 0a 23 64 65 66 69 6e 65 20 74 65 73 74 63 61 73  .#define testcas
0310: 65 28 78 29 0a 23 64 65 66 69 6e 65 20 41 4c 57  e(x).#define ALW
0320: 41 59 53 28 78 29 20 31 0a 23 64 65 66 69 6e 65  AYS(x) 1.#define
0330: 20 4e 45 56 45 52 28 78 29 20 30 0a 0a 23 64 65   NEVER(x) 0..#de
0340: 66 69 6e 65 20 4d 49 4e 28 78 2c 79 29 20 28 28  fine MIN(x,y) ((
0350: 28 78 29 20 3c 20 28 79 29 29 20 3f 20 28 78 29  (x) < (y)) ? (x)
0360: 20 3a 20 28 79 29 29 0a 23 64 65 66 69 6e 65 20   : (y)).#define 
0370: 4d 41 58 28 78 2c 79 29 20 28 28 28 78 29 20 3e  MAX(x,y) (((x) >
0380: 20 28 79 29 29 20 3f 20 28 78 29 20 3a 20 28 79   (y)) ? (x) : (y
0390: 29 29 0a 0a 2f 2a 0a 2a 2a 20 43 6f 6e 73 74 61  ))../*.** Consta
03a0: 6e 74 73 20 66 6f 72 20 74 68 65 20 6c 61 72 67  nts for the larg
03b0: 65 73 74 20 61 6e 64 20 73 6d 61 6c 6c 65 73 74  est and smallest
03c0: 20 70 6f 73 73 69 62 6c 65 20 36 34 2d 62 69 74   possible 64-bit
03d0: 20 73 69 67 6e 65 64 20 69 6e 74 65 67 65 72 73   signed integers
03e0: 2e 0a 2a 2f 0a 23 20 64 65 66 69 6e 65 20 4c 41  ..*/.# define LA
03f0: 52 47 45 53 54 5f 49 4e 54 36 34 20 20 28 30 78  RGEST_INT64  (0x
0400: 66 66 66 66 66 66 66 66 7c 28 28 28 69 36 34 29  ffffffff|(((i64)
0410: 30 78 37 66 66 66 66 66 66 66 29 3c 3c 33 32 29  0x7fffffff)<<32)
0420: 29 0a 23 20 64 65 66 69 6e 65 20 53 4d 41 4c 4c  ).# define SMALL
0430: 45 53 54 5f 49 4e 54 36 34 20 28 28 28 69 36 34  EST_INT64 (((i64
0440: 29 2d 31 29 20 2d 20 4c 41 52 47 45 53 54 5f 49  )-1) - LARGEST_I
0450: 4e 54 36 34 29 0a 0a 23 65 6e 64 69 66 0a 0a 2f  NT64)..#endif../
0460: 2a 20 54 72 75 6e 63 61 74 65 20 76 65 72 79 20  * Truncate very 
0470: 6c 6f 6e 67 20 74 6f 6b 65 6e 73 20 74 6f 20 74  long tokens to t
0480: 68 69 73 20 6d 61 6e 79 20 62 79 74 65 73 2e 20  his many bytes. 
0490: 48 61 72 64 20 6c 69 6d 69 74 20 69 73 20 0a 2a  Hard limit is .*
04a0: 2a 20 28 36 35 35 33 36 2d 31 2d 31 2d 34 2d 39  * (65536-1-1-4-9
04b0: 29 3d 3d 36 35 35 32 31 20 62 79 74 65 73 2e 20  )==65521 bytes. 
04c0: 54 68 65 20 6c 69 6d 69 74 69 6e 67 20 66 61 63  The limiting fac
04d0: 74 6f 72 20 69 73 20 74 68 65 20 31 36 2d 62 69  tor is the 16-bi
04e0: 74 20 6f 66 66 73 65 74 0a 2a 2a 20 66 69 65 6c  t offset.** fiel
04f0: 64 20 74 68 61 74 20 6f 63 63 75 72 73 20 61 74  d that occurs at
0500: 20 74 68 65 20 73 74 61 72 74 20 6f 66 20 65 61   the start of ea
0510: 63 68 20 6c 65 61 66 20 70 61 67 65 20 28 73 65  ch leaf page (se
0520: 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 29 2e  e fts5_index.c).
0530: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
0540: 5f 4d 41 58 5f 54 4f 4b 45 4e 5f 53 49 5a 45 20  _MAX_TOKEN_SIZE 
0550: 33 32 37 36 38 0a 0a 2f 2a 0a 2a 2a 20 4d 61 78  32768../*.** Max
0560: 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f 66 20 70  imum number of p
0570: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 6f 6e  refix indexes on
0580: 20 73 69 6e 67 6c 65 20 46 54 53 35 20 74 61 62   single FTS5 tab
0590: 6c 65 2e 20 54 68 69 73 20 6d 75 73 74 20 62 65  le. This must be
05a0: 0a 2a 2a 20 6c 65 73 73 20 74 68 61 6e 20 33 32  .** less than 32
05b0: 2e 20 49 66 20 69 74 20 69 73 20 73 65 74 20 74  . If it is set t
05c0: 6f 20 61 6e 79 74 68 69 6e 67 20 6c 61 72 67 65  o anything large
05d0: 20 74 68 61 6e 20 74 68 61 74 2c 20 61 6e 20 23   than that, an #
05e0: 65 72 72 6f 72 0a 2a 2a 20 64 69 72 65 63 74 69  error.** directi
05f0: 76 65 20 69 6e 20 66 74 73 35 5f 69 6e 64 65 78  ve in fts5_index
0600: 2e 63 20 77 69 6c 6c 20 63 61 75 73 65 20 74 68  .c will cause th
0610: 65 20 62 75 69 6c 64 20 74 6f 20 66 61 69 6c 2e  e build to fail.
0620: 0a 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35  .*/.#define FTS5
0630: 5f 4d 41 58 5f 50 52 45 46 49 58 5f 49 4e 44 45  _MAX_PREFIX_INDE
0640: 58 45 53 20 33 31 0a 0a 23 64 65 66 69 6e 65 20  XES 31..#define 
0650: 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 4e 45 41  FTS5_DEFAULT_NEA
0660: 52 44 49 53 54 20 31 30 0a 23 64 65 66 69 6e 65  RDIST 10.#define
0670: 20 46 54 53 35 5f 44 45 46 41 55 4c 54 5f 52 41   FTS5_DEFAULT_RA
0680: 4e 4b 20 20 20 20 20 22 62 6d 32 35 22 0a 0a 2f  NK     "bm25"../
0690: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 61  * Name of rank a
06a0: 6e 64 20 72 6f 77 69 64 20 63 6f 6c 75 6d 6e 73  nd rowid columns
06b0: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
06c0: 5f 52 41 4e 4b 5f 4e 41 4d 45 20 22 72 61 6e 6b  _RANK_NAME "rank
06d0: 22 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 52  ".#define FTS5_R
06e0: 4f 57 49 44 5f 4e 41 4d 45 20 22 72 6f 77 69 64  OWID_NAME "rowid
06f0: 22 0a 0a 23 69 66 64 65 66 20 53 51 4c 49 54 45  "..#ifdef SQLITE
0700: 5f 44 45 42 55 47 0a 23 20 64 65 66 69 6e 65 20  _DEBUG.# define 
0710: 46 54 53 35 5f 43 4f 52 52 55 50 54 20 73 71 6c  FTS5_CORRUPT sql
0720: 69 74 65 33 46 74 73 35 43 6f 72 72 75 70 74 28  ite3Fts5Corrupt(
0730: 29 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ).int sqlite3Fts
0740: 35 43 6f 72 72 75 70 74 28 76 6f 69 64 29 3b 0a  5Corrupt(void);.
0750: 23 65 6c 73 65 0a 23 20 64 65 66 69 6e 65 20 46  #else.# define F
0760: 54 53 35 5f 43 4f 52 52 55 50 54 20 53 51 4c 49  TS5_CORRUPT SQLI
0770: 54 45 5f 43 4f 52 52 55 50 54 5f 56 54 41 42 0a  TE_CORRUPT_VTAB.
0780: 23 65 6e 64 69 66 0a 0a 2f 2a 0a 2a 2a 20 54 68  #endif../*.** Th
0790: 65 20 61 73 73 65 72 74 5f 6e 63 28 29 20 6d 61  e assert_nc() ma
07a0: 63 72 6f 20 69 73 20 73 69 6d 69 6c 61 72 20 74  cro is similar t
07b0: 6f 20 74 68 65 20 61 73 73 65 72 74 28 29 20 6d  o the assert() m
07c0: 61 63 72 6f 2c 20 65 78 63 65 70 74 20 74 68 61  acro, except tha
07d0: 74 20 69 74 0a 2a 2a 20 69 73 20 75 73 65 64 20  t it.** is used 
07e0: 66 6f 72 20 61 73 73 65 72 74 28 29 20 63 6f 6e  for assert() con
07f0: 64 69 74 69 6f 6e 73 20 74 68 61 74 20 61 72 65  ditions that are
0800: 20 74 72 75 65 20 6f 6e 6c 79 20 69 66 20 69 74   true only if it
0810: 20 63 61 6e 20 62 65 20 0a 2a 2a 20 67 75 72 61   can be .** gura
0820: 6e 74 65 65 64 20 74 68 61 74 20 74 68 65 20 64  nteed that the d
0830: 61 74 61 62 61 73 65 20 69 73 20 6e 6f 74 20 63  atabase is not c
0840: 6f 72 72 75 70 74 2e 0a 2a 2f 0a 23 69 66 64 65  orrupt..*/.#ifde
0850: 66 20 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 65  f SQLITE_DEBUG.e
0860: 78 74 65 72 6e 20 69 6e 74 20 73 71 6c 69 74 65  xtern int sqlite
0870: 33 5f 66 74 73 35 5f 6d 61 79 5f 62 65 5f 63 6f  3_fts5_may_be_co
0880: 72 72 75 70 74 3b 0a 23 20 64 65 66 69 6e 65 20  rrupt;.# define 
0890: 61 73 73 65 72 74 5f 6e 63 28 78 29 20 61 73 73  assert_nc(x) ass
08a0: 65 72 74 28 73 71 6c 69 74 65 33 5f 66 74 73 35  ert(sqlite3_fts5
08b0: 5f 6d 61 79 5f 62 65 5f 63 6f 72 72 75 70 74 20  _may_be_corrupt 
08c0: 7c 7c 20 28 78 29 29 0a 23 65 6c 73 65 0a 23 20  || (x)).#else.# 
08d0: 64 65 66 69 6e 65 20 61 73 73 65 72 74 5f 6e 63  define assert_nc
08e0: 28 78 29 20 61 73 73 65 72 74 28 78 29 0a 23 65  (x) assert(x).#e
08f0: 6e 64 69 66 0a 0a 2f 2a 20 4d 61 72 6b 20 61 20  ndif../* Mark a 
0900: 66 75 6e 63 74 69 6f 6e 20 70 61 72 61 6d 65 74  function paramet
0910: 65 72 20 61 73 20 75 6e 75 73 65 64 2c 20 74 6f  er as unused, to
0920: 20 73 75 70 70 72 65 73 73 20 6e 75 69 73 61 6e   suppress nuisan
0930: 63 65 20 63 6f 6d 70 69 6c 65 72 0a 2a 2a 20 77  ce compiler.** w
0940: 61 72 6e 69 6e 67 73 2e 20 2a 2f 0a 23 69 66 6e  arnings. */.#ifn
0950: 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41 4d  def UNUSED_PARAM
0960: 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53 45 44  .# define UNUSED
0970: 5f 50 41 52 41 4d 28 58 29 20 20 28 76 6f 69 64  _PARAM(X)  (void
0980: 29 28 58 29 0a 23 65 6e 64 69 66 0a 0a 23 69 66  )(X).#endif..#if
0990: 6e 64 65 66 20 55 4e 55 53 45 44 5f 50 41 52 41  ndef UNUSED_PARA
09a0: 4d 32 0a 23 20 64 65 66 69 6e 65 20 55 4e 55 53  M2.# define UNUS
09b0: 45 44 5f 50 41 52 41 4d 32 28 58 2c 20 59 29 20  ED_PARAM2(X, Y) 
09c0: 20 28 76 6f 69 64 29 28 58 29 2c 20 28 76 6f 69   (void)(X), (voi
09d0: 64 29 28 59 29 0a 23 65 6e 64 69 66 0a 0a 74 79  d)(Y).#endif..ty
09e0: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
09f0: 35 47 6c 6f 62 61 6c 20 46 74 73 35 47 6c 6f 62  5Global Fts5Glob
0a00: 61 6c 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75  al;.typedef stru
0a10: 63 74 20 46 74 73 35 43 6f 6c 73 65 74 20 46 74  ct Fts5Colset Ft
0a20: 73 35 43 6f 6c 73 65 74 3b 0a 0a 2f 2a 20 49 66  s5Colset;../* If
0a30: 20 61 20 4e 45 41 52 28 29 20 63 6c 75 6d 70 20   a NEAR() clump 
0a40: 6f 72 20 70 68 72 61 73 65 20 6d 61 79 20 6f 6e  or phrase may on
0a50: 6c 79 20 6d 61 74 63 68 20 61 20 73 70 65 63 69  ly match a speci
0a60: 66 69 63 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d  fic set of colum
0a70: 6e 73 2c 20 0a 2a 2a 20 74 68 65 6e 20 61 6e 20  ns, .** then an 
0a80: 6f 62 6a 65 63 74 20 6f 66 20 74 68 65 20 66 6f  object of the fo
0a90: 6c 6c 6f 77 69 6e 67 20 74 79 70 65 20 69 73 20  llowing type is 
0aa0: 75 73 65 64 20 74 6f 20 72 65 63 6f 72 64 20 74  used to record t
0ab0: 68 65 20 73 65 74 20 6f 66 20 63 6f 6c 75 6d 6e  he set of column
0ac0: 73 2e 0a 2a 2a 20 45 61 63 68 20 65 6e 74 72 79  s..** Each entry
0ad0: 20 69 6e 20 74 68 65 20 61 69 43 6f 6c 5b 5d 20   in the aiCol[] 
0ae0: 61 72 72 61 79 20 69 73 20 61 20 63 6f 6c 75 6d  array is a colum
0af0: 6e 20 74 68 61 74 20 6d 61 79 20 62 65 20 6d 61  n that may be ma
0b00: 74 63 68 65 64 2e 0a 2a 2a 0a 2a 2a 20 54 68 69  tched..**.** Thi
0b10: 73 20 6f 62 6a 65 63 74 20 69 73 20 75 73 65 64  s object is used
0b20: 20 62 79 20 66 74 73 35 5f 65 78 70 72 2e 63 20   by fts5_expr.c 
0b30: 61 6e 64 20 66 74 73 35 5f 69 6e 64 65 78 2e 63  and fts5_index.c
0b40: 2e 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74 73 35  ..*/.struct Fts5
0b50: 43 6f 6c 73 65 74 20 7b 0a 20 20 69 6e 74 20 6e  Colset {.  int n
0b60: 43 6f 6c 3b 0a 20 20 69 6e 74 20 61 69 43 6f 6c  Col;.  int aiCol
0b70: 5b 31 5d 3b 0a 7d 3b 0a 0a 0a 0a 2f 2a 2a 2a 2a  [1];.};..../****
0b80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0b90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0ba0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bc0: 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66  ******.** Interf
0bd0: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
0be0: 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 20 66 74  ts5_config.c. ft
0bf0: 73 35 5f 63 6f 6e 66 69 67 2e 63 20 63 6f 6e 74  s5_config.c cont
0c00: 61 69 6e 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f  ains contains co
0c10: 64 65 0a 2a 2a 20 74 6f 20 70 61 72 73 65 20 74  de.** to parse t
0c20: 68 65 20 61 72 67 75 6d 65 6e 74 73 20 70 61 73  he arguments pas
0c30: 73 65 64 20 74 6f 20 74 68 65 20 43 52 45 41 54  sed to the CREAT
0c40: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20  E VIRTUAL TABLE 
0c50: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2f 0a 0a 74  statement..*/..t
0c60: 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74  ypedef struct Ft
0c70: 73 35 43 6f 6e 66 69 67 20 46 74 73 35 43 6f 6e  s5Config Fts5Con
0c80: 66 69 67 3b 0a 0a 2f 2a 0a 2a 2a 20 41 6e 20 69  fig;../*.** An i
0c90: 6e 73 74 61 6e 63 65 20 6f 66 20 74 68 65 20 66  nstance of the f
0ca0: 6f 6c 6c 6f 77 69 6e 67 20 73 74 72 75 63 74 75  ollowing structu
0cb0: 72 65 20 65 6e 63 6f 64 65 73 20 61 6c 6c 20 69  re encodes all i
0cc0: 6e 66 6f 72 6d 61 74 69 6f 6e 20 74 68 61 74 20  nformation that 
0cd0: 63 61 6e 0a 2a 2a 20 62 65 20 67 6c 65 61 6e 65  can.** be gleane
0ce0: 64 20 66 72 6f 6d 20 74 68 65 20 43 52 45 41 54  d from the CREAT
0cf0: 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20  E VIRTUAL TABLE 
0d00: 73 74 61 74 65 6d 65 6e 74 2e 0a 2a 2a 0a 2a 2a  statement..**.**
0d10: 20 41 6e 64 20 61 6c 6c 20 69 6e 66 6f 72 6d 61   And all informa
0d20: 74 69 6f 6e 20 6c 6f 61 64 65 64 20 66 72 6f 6d  tion loaded from
0d30: 20 74 68 65 20 25 5f 63 6f 6e 66 69 67 20 74 61   the %_config ta
0d40: 62 6c 65 2e 0a 2a 2a 0a 2a 2a 20 6e 41 75 74 6f  ble..**.** nAuto
0d50: 6d 65 72 67 65 3a 0a 2a 2a 20 20 20 54 68 65 20  merge:.**   The 
0d60: 6d 69 6e 69 6d 75 6d 20 6e 75 6d 62 65 72 20 6f  minimum number o
0d70: 66 20 73 65 67 6d 65 6e 74 73 20 74 68 61 74 20  f segments that 
0d80: 61 6e 20 61 75 74 6f 2d 6d 65 72 67 65 20 6f 70  an auto-merge op
0d90: 65 72 61 74 69 6f 6e 20 73 68 6f 75 6c 64 0a 2a  eration should.*
0da0: 2a 20 20 20 61 74 74 65 6d 70 74 20 74 6f 20 6d  *   attempt to m
0db0: 65 72 67 65 20 74 6f 67 65 74 68 65 72 2e 20 41  erge together. A
0dc0: 20 76 61 6c 75 65 20 6f 66 20 31 20 73 65 74 73   value of 1 sets
0dd0: 20 74 68 65 20 6f 62 6a 65 63 74 20 74 6f 20 75   the object to u
0de0: 73 65 20 74 68 65 20 0a 2a 2a 20 20 20 63 6f 6d  se the .**   com
0df0: 70 69 6c 65 20 74 69 6d 65 20 64 65 66 61 75 6c  pile time defaul
0e00: 74 2e 20 5a 65 72 6f 20 64 69 73 61 62 6c 65 73  t. Zero disables
0e10: 20 61 75 74 6f 2d 6d 65 72 67 65 20 61 6c 74 6f   auto-merge alto
0e20: 67 65 74 68 65 72 2e 0a 2a 2a 0a 2a 2a 20 7a 43  gether..**.** zC
0e30: 6f 6e 74 65 6e 74 3a 0a 2a 2a 0a 2a 2a 20 7a 43  ontent:.**.** zC
0e40: 6f 6e 74 65 6e 74 52 6f 77 69 64 3a 0a 2a 2a 20  ontentRowid:.** 
0e50: 20 20 54 68 65 20 76 61 6c 75 65 20 6f 66 20 74    The value of t
0e60: 68 65 20 63 6f 6e 74 65 6e 74 5f 72 6f 77 69 64  he content_rowid
0e70: 3d 20 6f 70 74 69 6f 6e 2c 20 69 66 20 6f 6e 65  = option, if one
0e80: 20 77 61 73 20 73 70 65 63 69 66 69 65 64 2e 20   was specified. 
0e90: 4f 72 20 0a 2a 2a 20 20 20 74 68 65 20 73 74 72  Or .**   the str
0ea0: 69 6e 67 20 22 72 6f 77 69 64 22 20 6f 74 68 65  ing "rowid" othe
0eb0: 72 77 69 73 65 2e 20 54 68 69 73 20 74 65 78 74  rwise. This text
0ec0: 20 69 73 20 6e 6f 74 20 71 75 6f 74 65 64 20 2d   is not quoted -
0ed0: 20 69 66 20 69 74 20 69 73 0a 2a 2a 20 20 20 75   if it is.**   u
0ee0: 73 65 64 20 61 73 20 70 61 72 74 20 6f 66 20 61  sed as part of a
0ef0: 6e 20 53 51 4c 20 73 74 61 74 65 6d 65 6e 74 20  n SQL statement 
0f00: 69 74 20 6e 65 65 64 73 20 74 6f 20 62 65 20 71  it needs to be q
0f10: 75 6f 74 65 64 20 61 70 70 72 6f 70 72 69 61 74  uoted appropriat
0f20: 65 6c 79 2e 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74  ely..**.** zCont
0f30: 65 6e 74 45 78 70 72 6c 69 73 74 3a 0a 2a 2a 0a  entExprlist:.**.
0f40: 2a 2a 20 70 7a 45 72 72 6d 73 67 3a 0a 2a 2a 20  ** pzErrmsg:.** 
0f50: 20 20 54 68 69 73 20 65 78 69 73 74 73 20 69 6e    This exists in
0f60: 20 6f 72 64 65 72 20 74 6f 20 61 6c 6c 6f 77 20   order to allow 
0f70: 74 68 65 20 66 74 73 35 5f 69 6e 64 65 78 2e 63  the fts5_index.c
0f80: 20 6d 6f 64 75 6c 65 20 74 6f 20 72 65 74 75 72   module to retur
0f90: 6e 20 61 20 0a 2a 2a 20 20 20 64 65 63 65 6e 74  n a .**   decent
0fa0: 20 65 72 72 6f 72 20 6d 65 73 73 61 67 65 20 69   error message i
0fb0: 66 20 69 74 20 65 6e 63 6f 75 6e 74 65 72 73 20  f it encounters 
0fc0: 61 20 66 69 6c 65 2d 66 6f 72 6d 61 74 20 76 65  a file-format ve
0fd0: 72 73 69 6f 6e 20 69 74 20 64 6f 65 73 0a 2a 2a  rsion it does.**
0fe0: 20 20 20 6e 6f 74 20 75 6e 64 65 72 73 74 61 6e     not understan
0ff0: 64 2e 0a 2a 2a 0a 2a 2a 20 62 43 6f 6c 75 6d 6e  d..**.** bColumn
1000: 73 69 7a 65 3a 0a 2a 2a 20 20 20 54 72 75 65 20  size:.**   True 
1010: 69 66 20 74 68 65 20 25 5f 64 6f 63 73 69 7a 65  if the %_docsize
1020: 20 74 61 62 6c 65 20 69 73 20 63 72 65 61 74 65   table is create
1030: 64 2e 0a 2a 2a 0a 2a 2a 20 62 50 72 65 66 69 78  d..**.** bPrefix
1040: 49 6e 64 65 78 3a 0a 2a 2a 20 20 20 54 68 69 73  Index:.**   This
1050: 20 69 73 20 6f 6e 6c 79 20 75 73 65 64 20 66 6f   is only used fo
1060: 72 20 64 65 62 75 67 67 69 6e 67 2e 20 49 66 20  r debugging. If 
1070: 73 65 74 20 74 6f 20 66 61 6c 73 65 2c 20 61 6e  set to false, an
1080: 79 20 70 72 65 66 69 78 20 69 6e 64 65 78 65 73  y prefix indexes
1090: 0a 2a 2a 20 20 20 61 72 65 20 69 67 6e 6f 72 65  .**   are ignore
10a0: 64 2e 20 54 68 69 73 20 76 61 6c 75 65 20 69 73  d. This value is
10b0: 20 63 6f 6e 66 69 67 75 72 65 64 20 75 73 69 6e   configured usin
10c0: 67 3a 0a 2a 2a 0a 2a 2a 20 20 20 20 20 20 20 49  g:.**.**       I
10d0: 4e 53 45 52 54 20 49 4e 54 4f 20 74 62 6c 28 74  NSERT INTO tbl(t
10e0: 62 6c 2c 20 72 61 6e 6b 29 20 56 41 4c 55 45 53  bl, rank) VALUES
10f0: 28 27 70 72 65 66 69 78 2d 69 6e 64 65 78 27 2c  ('prefix-index',
1100: 20 24 62 50 72 65 66 69 78 49 6e 64 65 78 29 3b   $bPrefixIndex);
1110: 0a 2a 2a 0a 2a 2f 0a 73 74 72 75 63 74 20 46 74  .**.*/.struct Ft
1120: 73 35 43 6f 6e 66 69 67 20 7b 0a 20 20 73 71 6c  s5Config {.  sql
1130: 69 74 65 33 20 2a 64 62 3b 20 20 20 20 20 20 20  ite3 *db;       
1140: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1150: 44 61 74 61 62 61 73 65 20 68 61 6e 64 6c 65 20  Database handle 
1160: 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 44 62 3b 20  */.  char *zDb; 
1170: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1180: 20 20 20 20 20 2f 2a 20 44 61 74 61 62 61 73 65       /* Database
1190: 20 68 6f 6c 64 69 6e 67 20 46 54 53 20 69 6e 64   holding FTS ind
11a0: 65 78 20 28 65 2e 67 2e 20 22 6d 61 69 6e 22 29  ex (e.g. "main")
11b0: 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 4e 61 6d   */.  char *zNam
11c0: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
11d0: 20 20 20 20 20 20 2f 2a 20 4e 61 6d 65 20 6f 66        /* Name of
11e0: 20 46 54 53 20 69 6e 64 65 78 20 2a 2f 0a 20 20   FTS index */.  
11f0: 69 6e 74 20 6e 43 6f 6c 3b 20 20 20 20 20 20 20  int nCol;       
1200: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1210: 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 63 6f 6c  /* Number of col
1220: 75 6d 6e 73 20 2a 2f 0a 20 20 63 68 61 72 20 2a  umns */.  char *
1230: 2a 61 7a 43 6f 6c 3b 20 20 20 20 20 20 20 20 20  *azCol;         
1240: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c            /* Col
1250: 75 6d 6e 20 6e 61 6d 65 73 20 2a 2f 0a 20 20 75  umn names */.  u
1260: 38 20 2a 61 62 55 6e 69 6e 64 65 78 65 64 3b 20  8 *abUnindexed; 
1270: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
1280: 2a 20 54 72 75 65 20 66 6f 72 20 75 6e 69 6e 64  * True for unind
1290: 65 78 65 64 20 63 6f 6c 75 6d 6e 73 20 2a 2f 0a  exed columns */.
12a0: 20 20 69 6e 74 20 6e 50 72 65 66 69 78 3b 20 20    int nPrefix;  
12b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
12c0: 20 20 2f 2a 20 4e 75 6d 62 65 72 20 6f 66 20 70    /* Number of p
12d0: 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a 2f  refix indexes */
12e0: 0a 20 20 69 6e 74 20 2a 61 50 72 65 66 69 78 3b  .  int *aPrefix;
12f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1300: 20 20 20 2f 2a 20 53 69 7a 65 73 20 69 6e 20 62     /* Sizes in b
1310: 79 74 65 73 20 6f 66 20 6e 50 72 65 66 69 78 20  ytes of nPrefix 
1320: 70 72 65 66 69 78 20 69 6e 64 65 78 65 73 20 2a  prefix indexes *
1330: 2f 0a 20 20 69 6e 74 20 65 43 6f 6e 74 65 6e 74  /.  int eContent
1340: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1350: 20 20 20 20 2f 2a 20 41 6e 20 46 54 53 35 5f 43      /* An FTS5_C
1360: 4f 4e 54 45 4e 54 20 76 61 6c 75 65 20 2a 2f 0a  ONTENT value */.
1370: 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74 65 6e 74    char *zContent
1380: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1390: 20 20 2f 2a 20 63 6f 6e 74 65 6e 74 20 74 61 62    /* content tab
13a0: 6c 65 20 2a 2f 20 0a 20 20 63 68 61 72 20 2a 7a  le */ .  char *z
13b0: 43 6f 6e 74 65 6e 74 52 6f 77 69 64 3b 20 20 20  ContentRowid;   
13c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 22 63 6f 6e           /* "con
13d0: 74 65 6e 74 5f 72 6f 77 69 64 3d 22 20 6f 70 74  tent_rowid=" opt
13e0: 69 6f 6e 20 76 61 6c 75 65 20 2a 2f 20 0a 20 20  ion value */ .  
13f0: 69 6e 74 20 62 43 6f 6c 75 6d 6e 73 69 7a 65 3b  int bColumnsize;
1400: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1410: 2f 2a 20 22 63 6f 6c 75 6d 6e 73 69 7a 65 3d 22  /* "columnsize="
1420: 20 6f 70 74 69 6f 6e 20 76 61 6c 75 65 20 28 64   option value (d
1430: 66 6c 74 3d 3d 31 29 20 2a 2f 0a 20 20 69 6e 74  flt==1) */.  int
1440: 20 65 44 65 74 61 69 6c 3b 20 20 20 20 20 20 20   eDetail;       
1450: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1460: 46 54 53 35 5f 44 45 54 41 49 4c 5f 58 58 58 20  FTS5_DETAIL_XXX 
1470: 76 61 6c 75 65 20 2a 2f 0a 20 20 63 68 61 72 20  value */.  char 
1480: 2a 7a 43 6f 6e 74 65 6e 74 45 78 70 72 6c 69 73  *zContentExprlis
1490: 74 3b 0a 20 20 46 74 73 35 54 6f 6b 65 6e 69 7a  t;.  Fts5Tokeniz
14a0: 65 72 20 2a 70 54 6f 6b 3b 0a 20 20 66 74 73 35  er *pTok;.  fts5
14b0: 5f 74 6f 6b 65 6e 69 7a 65 72 20 2a 70 54 6f 6b  _tokenizer *pTok
14c0: 41 70 69 3b 0a 0a 20 20 2f 2a 20 56 61 6c 75 65  Api;..  /* Value
14d0: 73 20 6c 6f 61 64 65 64 20 66 72 6f 6d 20 74 68  s loaded from th
14e0: 65 20 25 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65  e %_config table
14f0: 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f 6f 6b 69   */.  int iCooki
1500: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
1510: 20 20 20 20 20 20 2f 2a 20 49 6e 63 72 65 6d 65        /* Increme
1520: 6e 74 65 64 20 77 68 65 6e 20 25 5f 63 6f 6e 66  nted when %_conf
1530: 69 67 20 69 73 20 6d 6f 64 69 66 69 65 64 20 2a  ig is modified *
1540: 2f 0a 20 20 69 6e 74 20 70 67 73 7a 3b 20 20 20  /.  int pgsz;   
1550: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1560: 20 20 20 20 2f 2a 20 41 70 70 72 6f 78 69 6d 61      /* Approxima
1570: 74 65 20 70 61 67 65 20 73 69 7a 65 20 75 73 65  te page size use
1580: 64 20 69 6e 20 25 5f 64 61 74 61 20 2a 2f 0a 20  d in %_data */. 
1590: 20 69 6e 74 20 6e 41 75 74 6f 6d 65 72 67 65 3b   int nAutomerge;
15a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
15b0: 20 2f 2a 20 27 61 75 74 6f 6d 65 72 67 65 27 20   /* 'automerge' 
15c0: 73 65 74 74 69 6e 67 20 2a 2f 0a 20 20 69 6e 74  setting */.  int
15d0: 20 6e 43 72 69 73 69 73 4d 65 72 67 65 3b 20 20   nCrisisMerge;  
15e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
15f0: 4d 61 78 69 6d 75 6d 20 61 6c 6c 6f 77 65 64 20  Maximum allowed 
1600: 73 65 67 6d 65 6e 74 73 20 70 65 72 20 6c 65 76  segments per lev
1610: 65 6c 20 2a 2f 0a 20 20 69 6e 74 20 6e 55 73 65  el */.  int nUse
1620: 72 6d 65 72 67 65 3b 20 20 20 20 20 20 20 20 20  rmerge;         
1630: 20 20 20 20 20 20 20 20 2f 2a 20 27 75 73 65 72          /* 'user
1640: 6d 65 72 67 65 27 20 73 65 74 74 69 6e 67 20 2a  merge' setting *
1650: 2f 0a 20 20 69 6e 74 20 6e 48 61 73 68 53 69 7a  /.  int nHashSiz
1660: 65 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  e;              
1670: 20 20 20 20 2f 2a 20 42 79 74 65 73 20 6f 66 20      /* Bytes of 
1680: 6d 65 6d 6f 72 79 20 66 6f 72 20 69 6e 2d 6d 65  memory for in-me
1690: 6d 6f 72 79 20 68 61 73 68 20 2a 2f 0a 20 20 63  mory hash */.  c
16a0: 68 61 72 20 2a 7a 52 61 6e 6b 3b 20 20 20 20 20  har *zRank;     
16b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
16c0: 2a 20 4e 61 6d 65 20 6f 66 20 72 61 6e 6b 20 66  * Name of rank f
16d0: 75 6e 63 74 69 6f 6e 20 2a 2f 0a 20 20 63 68 61  unction */.  cha
16e0: 72 20 2a 7a 52 61 6e 6b 41 72 67 73 3b 20 20 20  r *zRankArgs;   
16f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1700: 41 72 67 75 6d 65 6e 74 73 20 74 6f 20 72 61 6e  Arguments to ran
1710: 6b 20 66 75 6e 63 74 69 6f 6e 20 2a 2f 0a 0a 20  k function */.. 
1720: 20 2f 2a 20 49 66 20 6e 6f 6e 2d 4e 55 4c 4c 2c   /* If non-NULL,
1730: 20 70 6f 69 6e 74 73 20 74 6f 20 73 71 6c 69 74   points to sqlit
1740: 65 33 5f 76 74 61 62 2e 62 61 73 65 2e 7a 45 72  e3_vtab.base.zEr
1750: 72 6d 73 67 2e 20 4f 66 74 65 6e 20 4e 55 4c 4c  rmsg. Often NULL
1760: 2e 20 2a 2f 0a 20 20 63 68 61 72 20 2a 2a 70 7a  . */.  char **pz
1770: 45 72 72 6d 73 67 3b 0a 0a 23 69 66 64 65 66 20  Errmsg;..#ifdef 
1780: 53 51 4c 49 54 45 5f 44 45 42 55 47 0a 20 20 69  SQLITE_DEBUG.  i
1790: 6e 74 20 62 50 72 65 66 69 78 49 6e 64 65 78 3b  nt bPrefixIndex;
17a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
17b0: 2a 20 54 72 75 65 20 74 6f 20 75 73 65 20 70 72  * True to use pr
17c0: 65 66 69 78 2d 69 6e 64 65 78 65 73 20 2a 2f 0a  efix-indexes */.
17d0: 23 65 6e 64 69 66 0a 7d 3b 0a 0a 2f 2a 20 43 75  #endif.};../* Cu
17e0: 72 72 65 6e 74 20 65 78 70 65 63 74 65 64 20 76  rrent expected v
17f0: 61 6c 75 65 20 6f 66 20 25 5f 63 6f 6e 66 69 67  alue of %_config
1800: 20 74 61 62 6c 65 20 27 76 65 72 73 69 6f 6e 27   table 'version'
1810: 20 66 69 65 6c 64 20 2a 2f 0a 23 64 65 66 69 6e   field */.#defin
1820: 65 20 46 54 53 35 5f 43 55 52 52 45 4e 54 5f 56  e FTS5_CURRENT_V
1830: 45 52 53 49 4f 4e 20 34 0a 0a 23 64 65 66 69 6e  ERSION 4..#defin
1840: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e  e FTS5_CONTENT_N
1850: 4f 52 4d 41 4c 20 20 20 30 0a 23 64 65 66 69 6e  ORMAL   0.#defin
1860: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 4e  e FTS5_CONTENT_N
1870: 4f 4e 45 20 20 20 20 20 31 0a 23 64 65 66 69 6e  ONE     1.#defin
1880: 65 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54 5f 45  e FTS5_CONTENT_E
1890: 58 54 45 52 4e 41 4c 20 32 0a 0a 23 64 65 66 69  XTERNAL 2..#defi
18a0: 6e 65 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 46  ne FTS5_DETAIL_F
18b0: 55 4c 4c 20 20 20 20 30 0a 23 64 65 66 69 6e 65  ULL    0.#define
18c0: 20 46 54 53 35 5f 44 45 54 41 49 4c 5f 4e 4f 4e   FTS5_DETAIL_NON
18d0: 45 20 20 20 20 31 0a 23 64 65 66 69 6e 65 20 46  E    1.#define F
18e0: 54 53 35 5f 44 45 54 41 49 4c 5f 43 4f 4c 55 4d  TS5_DETAIL_COLUM
18f0: 4e 53 20 32 0a 0a 0a 0a 69 6e 74 20 73 71 6c 69  NS 2....int sqli
1900: 74 65 33 46 74 73 35 43 6f 6e 66 69 67 50 61 72  te3Fts5ConfigPar
1910: 73 65 28 0a 20 20 20 20 46 74 73 35 47 6c 6f 62  se(.    Fts5Glob
1920: 61 6c 2a 2c 20 73 71 6c 69 74 65 33 2a 2c 20 69  al*, sqlite3*, i
1930: 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61 72 20 2a  nt, const char *
1940: 2a 2c 20 46 74 73 35 43 6f 6e 66 69 67 2a 2a 2c  *, Fts5Config**,
1950: 20 63 68 61 72 2a 2a 0a 29 3b 0a 76 6f 69 64 20   char**.);.void 
1960: 73 71 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69  sqlite3Fts5Confi
1970: 67 46 72 65 65 28 46 74 73 35 43 6f 6e 66 69 67  gFree(Fts5Config
1980: 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  *);..int sqlite3
1990: 46 74 73 35 43 6f 6e 66 69 67 44 65 63 6c 61 72  Fts5ConfigDeclar
19a0: 65 56 74 61 62 28 46 74 73 35 43 6f 6e 66 69 67  eVtab(Fts5Config
19b0: 20 2a 70 43 6f 6e 66 69 67 29 3b 0a 0a 69 6e 74   *pConfig);..int
19c0: 20 73 71 6c 69 74 65 33 46 74 73 35 54 6f 6b 65   sqlite3Fts5Toke
19d0: 6e 69 7a 65 28 0a 20 20 46 74 73 35 43 6f 6e 66  nize(.  Fts5Conf
19e0: 69 67 20 2a 70 43 6f 6e 66 69 67 2c 20 20 20 20  ig *pConfig,    
19f0: 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53 35 20          /* FTS5 
1a00: 43 6f 6e 66 69 67 75 72 61 74 69 6f 6e 20 6f 62  Configuration ob
1a10: 6a 65 63 74 20 2a 2f 0a 20 20 69 6e 74 20 66 6c  ject */.  int fl
1a20: 61 67 73 2c 20 20 20 20 20 20 20 20 20 20 20 20  ags,            
1a30: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 54 53            /* FTS
1a40: 35 5f 54 4f 4b 45 4e 49 5a 45 5f 2a 20 66 6c 61  5_TOKENIZE_* fla
1a50: 67 73 20 2a 2f 0a 20 20 63 6f 6e 73 74 20 63 68  gs */.  const ch
1a60: 61 72 20 2a 70 54 65 78 74 2c 20 69 6e 74 20 6e  ar *pText, int n
1a70: 54 65 78 74 2c 20 20 20 2f 2a 20 54 65 78 74 20  Text,   /* Text 
1a80: 74 6f 20 74 6f 6b 65 6e 69 7a 65 20 2a 2f 0a 20  to tokenize */. 
1a90: 20 76 6f 69 64 20 2a 70 43 74 78 2c 20 20 20 20   void *pCtx,    
1aa0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1ab0: 20 2f 2a 20 43 6f 6e 74 65 78 74 20 70 61 73 73   /* Context pass
1ac0: 65 64 20 74 6f 20 78 54 6f 6b 65 6e 28 29 20 2a  ed to xToken() *
1ad0: 2f 0a 20 20 69 6e 74 20 28 2a 78 54 6f 6b 65 6e  /.  int (*xToken
1ae0: 29 28 76 6f 69 64 2a 2c 20 69 6e 74 2c 20 63 6f  )(void*, int, co
1af0: 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20  nst char*, int, 
1b00: 69 6e 74 2c 20 69 6e 74 29 20 20 20 20 2f 2a 20  int, int)    /* 
1b10: 43 61 6c 6c 62 61 63 6b 20 2a 2f 0a 29 3b 0a 0a  Callback */.);..
1b20: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
1b30: 44 65 71 75 6f 74 65 28 63 68 61 72 20 2a 7a 29  Dequote(char *z)
1b40: 3b 0a 0a 2f 2a 20 4c 6f 61 64 20 74 68 65 20 63  ;../* Load the c
1b50: 6f 6e 74 65 6e 74 73 20 6f 66 20 74 68 65 20 25  ontents of the %
1b60: 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 20 2a 2f  _config table */
1b70: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
1b80: 43 6f 6e 66 69 67 4c 6f 61 64 28 46 74 73 35 43  ConfigLoad(Fts5C
1b90: 6f 6e 66 69 67 2a 2c 20 69 6e 74 29 3b 0a 0a 2f  onfig*, int);../
1ba0: 2a 20 53 65 74 20 74 68 65 20 76 61 6c 75 65 20  * Set the value 
1bb0: 6f 66 20 61 20 73 69 6e 67 6c 65 20 63 6f 6e 66  of a single conf
1bc0: 69 67 20 61 74 74 72 69 62 75 74 65 20 2a 2f 0a  ig attribute */.
1bd0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43  int sqlite3Fts5C
1be0: 6f 6e 66 69 67 53 65 74 56 61 6c 75 65 28 46 74  onfigSetValue(Ft
1bf0: 73 35 43 6f 6e 66 69 67 2a 2c 20 63 6f 6e 73 74  s5Config*, const
1c00: 20 63 68 61 72 2a 2c 20 73 71 6c 69 74 65 33 5f   char*, sqlite3_
1c10: 76 61 6c 75 65 2a 2c 20 69 6e 74 2a 29 3b 0a 0a  value*, int*);..
1c20: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43  int sqlite3Fts5C
1c30: 6f 6e 66 69 67 50 61 72 73 65 52 61 6e 6b 28 63  onfigParseRank(c
1c40: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 63 68 61 72  onst char*, char
1c50: 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a 0a 2f 2a  **, char**);../*
1c60: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
1c70: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
1c80: 66 74 73 35 5f 63 6f 6e 66 69 67 2e 63 2e 0a 2a  fts5_config.c..*
1c90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1ca0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a  *********/../***
1ce0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cf0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d20: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72  *******.** Inter
1d30: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
1d40: 66 74 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a  fts5_buffer.c..*
1d50: 2f 0a 0a 2f 2a 0a 2a 2a 20 42 75 66 66 65 72 20  /../*.** Buffer 
1d60: 6f 62 6a 65 63 74 20 66 6f 72 20 74 68 65 20 69  object for the i
1d70: 6e 63 72 65 6d 65 6e 74 61 6c 20 62 75 69 6c 64  ncremental build
1d80: 69 6e 67 20 6f 66 20 73 74 72 69 6e 67 20 64 61  ing of string da
1d90: 74 61 2e 0a 2a 2f 0a 74 79 70 65 64 65 66 20 73  ta..*/.typedef s
1da0: 74 72 75 63 74 20 46 74 73 35 42 75 66 66 65 72  truct Fts5Buffer
1db0: 20 46 74 73 35 42 75 66 66 65 72 3b 0a 73 74 72   Fts5Buffer;.str
1dc0: 75 63 74 20 46 74 73 35 42 75 66 66 65 72 20 7b  uct Fts5Buffer {
1dd0: 0a 20 20 75 38 20 2a 70 3b 0a 20 20 69 6e 74 20  .  u8 *p;.  int 
1de0: 6e 3b 0a 20 20 69 6e 74 20 6e 53 70 61 63 65 3b  n;.  int nSpace;
1df0: 0a 7d 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .};..int sqlite3
1e00: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 69  Fts5BufferSize(i
1e10: 6e 74 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a  nt*, Fts5Buffer*
1e20: 2c 20 75 33 32 29 3b 0a 76 6f 69 64 20 73 71 6c  , u32);.void sql
1e30: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
1e40: 70 65 6e 64 56 61 72 69 6e 74 28 69 6e 74 2a 2c  pendVarint(int*,
1e50: 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 36   Fts5Buffer*, i6
1e60: 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  4);.void sqlite3
1e70: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64  Fts5BufferAppend
1e80: 42 6c 6f 62 28 69 6e 74 2a 2c 20 46 74 73 35 42  Blob(int*, Fts5B
1e90: 75 66 66 65 72 2a 2c 20 75 33 32 2c 20 63 6f 6e  uffer*, u32, con
1ea0: 73 74 20 75 38 2a 29 3b 0a 76 6f 69 64 20 73 71  st u8*);.void sq
1eb0: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41  lite3Fts5BufferA
1ec0: 70 70 65 6e 64 53 74 72 69 6e 67 28 69 6e 74 20  ppendString(int 
1ed0: 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20  *, Fts5Buffer*, 
1ee0: 63 6f 6e 73 74 20 63 68 61 72 2a 29 3b 0a 76 6f  const char*);.vo
1ef0: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1f00: 66 66 65 72 46 72 65 65 28 46 74 73 35 42 75 66  fferFree(Fts5Buf
1f10: 66 65 72 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69  fer*);.void sqli
1f20: 74 65 33 46 74 73 35 42 75 66 66 65 72 5a 65 72  te3Fts5BufferZer
1f30: 6f 28 46 74 73 35 42 75 66 66 65 72 2a 29 3b 0a  o(Fts5Buffer*);.
1f40: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
1f50: 42 75 66 66 65 72 53 65 74 28 69 6e 74 2a 2c 20  BufferSet(int*, 
1f60: 46 74 73 35 42 75 66 66 65 72 2a 2c 20 69 6e 74  Fts5Buffer*, int
1f70: 2c 20 63 6f 6e 73 74 20 75 38 2a 29 3b 0a 76 6f  , const u8*);.vo
1f80: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1f90: 66 66 65 72 41 70 70 65 6e 64 50 72 69 6e 74 66  fferAppendPrintf
1fa0: 28 69 6e 74 20 2a 2c 20 46 74 73 35 42 75 66 66  (int *, Fts5Buff
1fb0: 65 72 2a 2c 20 63 68 61 72 20 2a 7a 46 6d 74 2c  er*, char *zFmt,
1fc0: 20 2e 2e 2e 29 3b 0a 0a 63 68 61 72 20 2a 73 71   ...);..char *sq
1fd0: 6c 69 74 65 33 46 74 73 35 4d 70 72 69 6e 74 66  lite3Fts5Mprintf
1fe0: 28 69 6e 74 20 2a 70 52 63 2c 20 63 6f 6e 73 74  (int *pRc, const
1ff0: 20 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e   char *zFmt, ...
2000: 29 3b 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 35  );..#define fts5
2010: 42 75 66 66 65 72 5a 65 72 6f 28 78 29 20 20 20  BufferZero(x)   
2020: 20 20 20 20 20 20 20 20 20 20 73 71 6c 69 74 65            sqlite
2030: 33 46 74 73 35 42 75 66 66 65 72 5a 65 72 6f 28  3Fts5BufferZero(
2040: 78 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 42  x).#define fts5B
2050: 75 66 66 65 72 41 70 70 65 6e 64 56 61 72 69 6e  ufferAppendVarin
2060: 74 28 61 2c 62 2c 63 29 20 73 71 6c 69 74 65 33  t(a,b,c) sqlite3
2070: 46 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64  Fts5BufferAppend
2080: 56 61 72 69 6e 74 28 61 2c 62 2c 63 29 0a 23 64  Varint(a,b,c).#d
2090: 65 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72  efine fts5Buffer
20a0: 46 72 65 65 28 61 29 20 20 20 20 20 20 20 20 20  Free(a)         
20b0: 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42      sqlite3Fts5B
20c0: 75 66 66 65 72 46 72 65 65 28 61 29 0a 23 64 65  ufferFree(a).#de
20d0: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 41  fine fts5BufferA
20e0: 70 70 65 6e 64 42 6c 6f 62 28 61 2c 62 2c 63 2c  ppendBlob(a,b,c,
20f0: 64 29 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  d) sqlite3Fts5Bu
2100: 66 66 65 72 41 70 70 65 6e 64 42 6c 6f 62 28 61  fferAppendBlob(a
2110: 2c 62 2c 63 2c 64 29 0a 23 64 65 66 69 6e 65 20  ,b,c,d).#define 
2120: 66 74 73 35 42 75 66 66 65 72 53 65 74 28 61 2c  fts5BufferSet(a,
2130: 62 2c 63 2c 64 29 20 20 20 20 20 20 20 20 73 71  b,c,d)        sq
2140: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 53  lite3Fts5BufferS
2150: 65 74 28 61 2c 62 2c 63 2c 64 29 0a 0a 23 64 65  et(a,b,c,d)..#de
2160: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 47  fine fts5BufferG
2170: 72 6f 77 28 70 52 63 2c 70 42 75 66 2c 6e 6e 29  row(pRc,pBuf,nn)
2180: 20 28 20 5c 0a 20 20 28 75 33 32 29 28 28 70 42   ( \.  (u32)((pB
2190: 75 66 29 2d 3e 6e 29 20 2b 20 28 75 33 32 29 28  uf)->n) + (u32)(
21a0: 6e 6e 29 20 3c 3d 20 28 75 33 32 29 28 28 70 42  nn) <= (u32)((pB
21b0: 75 66 29 2d 3e 6e 53 70 61 63 65 29 20 3f 20 30  uf)->nSpace) ? 0
21c0: 20 3a 20 5c 0a 20 20 20 20 73 71 6c 69 74 65 33   : \.    sqlite3
21d0: 46 74 73 35 42 75 66 66 65 72 53 69 7a 65 28 28  Fts5BufferSize((
21e0: 70 52 63 29 2c 28 70 42 75 66 29 2c 28 6e 6e 29  pRc),(pBuf),(nn)
21f0: 2b 28 70 42 75 66 29 2d 3e 6e 29 20 5c 0a 29 0a  +(pBuf)->n) \.).
2200: 0a 2f 2a 20 57 72 69 74 65 20 61 6e 64 20 64 65  ./* Write and de
2210: 63 6f 64 65 20 62 69 67 2d 65 6e 64 69 61 6e 20  code big-endian 
2220: 33 32 2d 62 69 74 20 69 6e 74 65 67 65 72 20 76  32-bit integer v
2230: 61 6c 75 65 73 20 2a 2f 0a 76 6f 69 64 20 73 71  alues */.void sq
2240: 6c 69 74 65 33 46 74 73 35 50 75 74 33 32 28 75  lite3Fts5Put32(u
2250: 38 2a 2c 20 69 6e 74 29 3b 0a 69 6e 74 20 73 71  8*, int);.int sq
2260: 6c 69 74 65 33 46 74 73 35 47 65 74 33 32 28 63  lite3Fts5Get32(c
2270: 6f 6e 73 74 20 75 38 2a 29 3b 0a 0a 23 64 65 66  onst u8*);..#def
2280: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 43 4f 4c  ine FTS5_POS2COL
2290: 55 4d 4e 28 69 50 6f 73 29 20 28 69 6e 74 29 28  UMN(iPos) (int)(
22a0: 69 50 6f 73 20 3e 3e 20 33 32 29 0a 23 64 65 66  iPos >> 32).#def
22b0: 69 6e 65 20 46 54 53 35 5f 50 4f 53 32 4f 46 46  ine FTS5_POS2OFF
22c0: 53 45 54 28 69 50 6f 73 29 20 28 69 6e 74 29 28  SET(iPos) (int)(
22d0: 69 50 6f 73 20 26 20 30 78 46 46 46 46 46 46 46  iPos & 0xFFFFFFF
22e0: 46 29 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75  F)..typedef stru
22f0: 63 74 20 46 74 73 35 50 6f 73 6c 69 73 74 52 65  ct Fts5PoslistRe
2300: 61 64 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74  ader Fts5Poslist
2310: 52 65 61 64 65 72 3b 0a 73 74 72 75 63 74 20 46  Reader;.struct F
2320: 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72  ts5PoslistReader
2330: 20 7b 0a 20 20 2f 2a 20 56 61 72 69 61 62 6c 65   {.  /* Variable
2340: 73 20 75 73 65 64 20 6f 6e 6c 79 20 62 79 20 73  s used only by s
2350: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
2360: 74 49 74 65 72 58 58 58 28 29 20 66 75 6e 63 74  tIterXXX() funct
2370: 69 6f 6e 73 2e 20 2a 2f 0a 20 20 63 6f 6e 73 74  ions. */.  const
2380: 20 75 38 20 2a 61 3b 20 20 20 20 20 20 20 20 20   u8 *a;         
2390: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f             /* Po
23a0: 73 69 74 69 6f 6e 20 6c 69 73 74 20 74 6f 20 69  sition list to i
23b0: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a  terate through *
23c0: 2f 0a 20 20 69 6e 74 20 6e 3b 20 20 20 20 20 20  /.  int n;      
23d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
23e0: 20 20 20 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62      /* Size of b
23f0: 75 66 66 65 72 20 61 74 20 61 5b 5d 20 69 6e 20  uffer at a[] in 
2400: 62 79 74 65 73 20 2a 2f 0a 20 20 69 6e 74 20 69  bytes */.  int i
2410: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
2420: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 75             /* Cu
2430: 72 72 65 6e 74 20 6f 66 66 73 65 74 20 69 6e 20  rrent offset in 
2440: 61 5b 5d 20 2a 2f 0a 0a 20 20 75 38 20 62 46 6c  a[] */..  u8 bFl
2450: 61 67 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  ag;             
2460: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 46 6f 72            /* For
2470: 20 63 6c 69 65 6e 74 20 75 73 65 20 28 61 6e 79   client use (any
2480: 20 63 75 73 74 6f 6d 20 70 75 72 70 6f 73 65 29   custom purpose)
2490: 20 2a 2f 0a 0a 20 20 2f 2a 20 4f 75 74 70 75 74   */..  /* Output
24a0: 20 76 61 72 69 61 62 6c 65 73 20 2a 2f 0a 20 20   variables */.  
24b0: 75 38 20 62 45 6f 66 3b 20 20 20 20 20 20 20 20  u8 bEof;        
24c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
24d0: 2f 2a 20 53 65 74 20 74 6f 20 74 72 75 65 20 61  /* Set to true a
24e0: 74 20 45 4f 46 20 2a 2f 0a 20 20 69 36 34 20 69  t EOF */.  i64 i
24f0: 50 6f 73 3b 20 20 20 20 20 20 20 20 20 20 20 20  Pos;            
2500: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 28 69             /* (i
2510: 43 6f 6c 3c 3c 33 32 29 20 2b 20 69 50 6f 73 20  Col<<32) + iPos 
2520: 2a 2f 0a 7d 3b 0a 69 6e 74 20 73 71 6c 69 74 65  */.};.int sqlite
2530: 33 46 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64  3Fts5PoslistRead
2540: 65 72 49 6e 69 74 28 0a 20 20 63 6f 6e 73 74 20  erInit(.  const 
2550: 75 38 20 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20  u8 *a, int n,   
2560: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73            /* Pos
2570: 6c 69 73 74 20 62 75 66 66 65 72 20 74 6f 20 69  list buffer to i
2580: 74 65 72 61 74 65 20 74 68 72 6f 75 67 68 20 2a  terate through *
2590: 2f 0a 20 20 46 74 73 35 50 6f 73 6c 69 73 74 52  /.  Fts5PoslistR
25a0: 65 61 64 65 72 20 2a 70 49 74 65 72 20 20 20 20  eader *pIter    
25b0: 20 20 20 20 2f 2a 20 49 74 65 72 61 74 6f 72 20      /* Iterator 
25c0: 6f 62 6a 65 63 74 20 74 6f 20 69 6e 69 74 69 61  object to initia
25d0: 6c 69 7a 65 20 2a 2f 0a 29 3b 0a 69 6e 74 20 73  lize */.);.int s
25e0: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
25f0: 74 52 65 61 64 65 72 4e 65 78 74 28 46 74 73 35  tReaderNext(Fts5
2600: 50 6f 73 6c 69 73 74 52 65 61 64 65 72 2a 29 3b  PoslistReader*);
2610: 0a 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74  ..typedef struct
2620: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74   Fts5PoslistWrit
2630: 65 72 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72  er Fts5PoslistWr
2640: 69 74 65 72 3b 0a 73 74 72 75 63 74 20 46 74 73  iter;.struct Fts
2650: 35 50 6f 73 6c 69 73 74 57 72 69 74 65 72 20 7b  5PoslistWriter {
2660: 0a 20 20 69 36 34 20 69 50 72 65 76 3b 0a 7d 3b  .  i64 iPrev;.};
2670: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
2680: 50 6f 73 6c 69 73 74 57 72 69 74 65 72 41 70 70  PoslistWriterApp
2690: 65 6e 64 28 46 74 73 35 42 75 66 66 65 72 2a 2c  end(Fts5Buffer*,
26a0: 20 46 74 73 35 50 6f 73 6c 69 73 74 57 72 69 74   Fts5PoslistWrit
26b0: 65 72 2a 2c 20 69 36 34 29 3b 0a 76 6f 69 64 20  er*, i64);.void 
26c0: 73 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69  sqlite3Fts5Posli
26d0: 73 74 53 61 66 65 41 70 70 65 6e 64 28 46 74 73  stSafeAppend(Fts
26e0: 35 42 75 66 66 65 72 2a 2c 20 69 36 34 2a 2c 20  5Buffer*, i64*, 
26f0: 69 36 34 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  i64);..int sqlit
2700: 65 33 46 74 73 35 50 6f 73 6c 69 73 74 4e 65 78  e3Fts5PoslistNex
2710: 74 36 34 28 0a 20 20 63 6f 6e 73 74 20 75 38 20  t64(.  const u8 
2720: 2a 61 2c 20 69 6e 74 20 6e 2c 20 20 20 20 20 20  *a, int n,      
2730: 20 20 20 20 20 20 20 2f 2a 20 42 75 66 66 65 72         /* Buffer
2740: 20 63 6f 6e 74 61 69 6e 69 6e 67 20 70 6f 73 6c   containing posl
2750: 69 73 74 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 69  ist */.  int *pi
2760: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
2770: 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e 2f 4f           /* IN/O
2780: 55 54 3a 20 4f 66 66 73 65 74 20 77 69 74 68 69  UT: Offset withi
2790: 6e 20 61 5b 5d 20 2a 2f 0a 20 20 69 36 34 20 2a  n a[] */.  i64 *
27a0: 70 69 4f 66 66 20 20 20 20 20 20 20 20 20 20 20  piOff           
27b0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 49 4e             /* IN
27c0: 2f 4f 55 54 3a 20 43 75 72 72 65 6e 74 20 6f 66  /OUT: Current of
27d0: 66 73 65 74 20 2a 2f 0a 29 3b 0a 0a 2f 2a 20 4d  fset */.);../* M
27e0: 61 6c 6c 6f 63 20 75 74 69 6c 69 74 79 20 2a 2f  alloc utility */
27f0: 0a 76 6f 69 64 20 2a 73 71 6c 69 74 65 33 46 74  .void *sqlite3Ft
2800: 73 35 4d 61 6c 6c 6f 63 5a 65 72 6f 28 69 6e 74  s5MallocZero(int
2810: 20 2a 70 52 63 2c 20 69 6e 74 20 6e 42 79 74 65   *pRc, int nByte
2820: 29 3b 0a 63 68 61 72 20 2a 73 71 6c 69 74 65 33  );.char *sqlite3
2830: 46 74 73 35 53 74 72 6e 64 75 70 28 69 6e 74 20  Fts5Strndup(int 
2840: 2a 70 52 63 2c 20 63 6f 6e 73 74 20 63 68 61 72  *pRc, const char
2850: 20 2a 70 49 6e 2c 20 69 6e 74 20 6e 49 6e 29 3b   *pIn, int nIn);
2860: 0a 0a 2f 2a 20 43 68 61 72 61 63 74 65 72 20 73  ../* Character s
2870: 65 74 20 74 65 73 74 73 20 28 6c 69 6b 65 20 69  et tests (like i
2880: 73 73 70 61 63 65 28 29 2c 20 69 73 61 6c 70 68  sspace(), isalph
2890: 61 28 29 20 65 74 63 2e 29 20 2a 2f 0a 69 6e 74  a() etc.) */.int
28a0: 20 73 71 6c 69 74 65 33 46 74 73 35 49 73 42 61   sqlite3Fts5IsBa
28b0: 72 65 77 6f 72 64 28 63 68 61 72 20 74 29 3b 0a  reword(char t);.
28c0: 0a 0a 2f 2a 20 42 75 63 6b 65 74 20 6f 66 20 74  ../* Bucket of t
28d0: 65 72 6d 73 20 6f 62 6a 65 63 74 20 75 73 65 64  erms object used
28e0: 20 62 79 20 74 68 65 20 69 6e 74 65 67 72 69 74   by the integrit
28f0: 79 2d 63 68 65 63 6b 20 69 6e 20 6f 66 66 73 65  y-check in offse
2900: 74 73 3d 30 20 6d 6f 64 65 2e 20 2a 2f 0a 74 79  ts=0 mode. */.ty
2910: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
2920: 35 54 65 72 6d 73 65 74 20 46 74 73 35 54 65 72  5Termset Fts5Ter
2930: 6d 73 65 74 3b 0a 69 6e 74 20 73 71 6c 69 74 65  mset;.int sqlite
2940: 33 46 74 73 35 54 65 72 6d 73 65 74 4e 65 77 28  3Fts5TermsetNew(
2950: 46 74 73 35 54 65 72 6d 73 65 74 2a 2a 29 3b 0a  Fts5Termset**);.
2960: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 54  int sqlite3Fts5T
2970: 65 72 6d 73 65 74 41 64 64 28 46 74 73 35 54 65  ermsetAdd(Fts5Te
2980: 72 6d 73 65 74 2a 2c 20 69 6e 74 2c 20 63 6f 6e  rmset*, int, con
2990: 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c 20 69  st char*, int, i
29a0: 6e 74 20 2a 70 62 50 72 65 73 65 6e 74 29 3b 0a  nt *pbPresent);.
29b0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
29c0: 54 65 72 6d 73 65 74 46 72 65 65 28 46 74 73 35  TermsetFree(Fts5
29d0: 54 65 72 6d 73 65 74 2a 29 3b 0a 0a 2f 2a 0a 2a  Termset*);../*.*
29e0: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61  * End of interfa
29f0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
2a00: 73 35 5f 62 75 66 66 65 72 2e 63 2e 0a 2a 2a 2a  s5_buffer.c..***
2a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a50: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
2a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2aa0: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
2ab0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
2ac0: 73 35 5f 69 6e 64 65 78 2e 63 2e 20 66 74 73 35  s5_index.c. fts5
2ad0: 5f 69 6e 64 65 78 2e 63 20 63 6f 6e 74 61 69 6e  _index.c contain
2ae0: 73 20 63 6f 6e 74 61 69 6e 73 20 63 6f 64 65 0a  s contains code.
2af0: 2a 2a 20 74 6f 20 61 63 63 65 73 73 20 74 68 65  ** to access the
2b00: 20 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20   data stored in 
2b10: 74 68 65 20 25 5f 64 61 74 61 20 74 61 62 6c 65  the %_data table
2b20: 2e 0a 2a 2f 0a 0a 74 79 70 65 64 65 66 20 73 74  ..*/..typedef st
2b30: 72 75 63 74 20 46 74 73 35 49 6e 64 65 78 20 46  ruct Fts5Index F
2b40: 74 73 35 49 6e 64 65 78 3b 0a 74 79 70 65 64 65  ts5Index;.typede
2b50: 66 20 73 74 72 75 63 74 20 46 74 73 35 49 6e 64  f struct Fts5Ind
2b60: 65 78 49 74 65 72 20 46 74 73 35 49 6e 64 65 78  exIter Fts5Index
2b70: 49 74 65 72 3b 0a 0a 73 74 72 75 63 74 20 46 74  Iter;..struct Ft
2b80: 73 35 49 6e 64 65 78 49 74 65 72 20 7b 0a 20 20  s5IndexIter {.  
2b90: 69 36 34 20 69 52 6f 77 69 64 3b 0a 20 20 63 6f  i64 iRowid;.  co
2ba0: 6e 73 74 20 75 38 20 2a 70 44 61 74 61 3b 0a 20  nst u8 *pData;. 
2bb0: 20 69 6e 74 20 6e 44 61 74 61 3b 0a 20 20 75 38   int nData;.  u8
2bc0: 20 62 45 6f 66 3b 0a 7d 3b 0a 0a 23 64 65 66 69   bEof;.};..#defi
2bd0: 6e 65 20 73 71 6c 69 74 65 33 46 74 73 35 49 74  ne sqlite3Fts5It
2be0: 65 72 45 6f 66 28 78 29 20 28 28 78 29 2d 3e 62  erEof(x) ((x)->b
2bf0: 45 6f 66 29 0a 0a 2f 2a 0a 2a 2a 20 56 61 6c 75  Eof)../*.** Valu
2c00: 65 73 20 75 73 65 64 20 61 73 20 70 61 72 74 20  es used as part 
2c10: 6f 66 20 74 68 65 20 66 6c 61 67 73 20 61 72 67  of the flags arg
2c20: 75 6d 65 6e 74 20 70 61 73 73 65 64 20 74 6f 20  ument passed to 
2c30: 49 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f  IndexQuery()..*/
2c40: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44  .#define FTS5IND
2c50: 45 58 5f 51 55 45 52 59 5f 50 52 45 46 49 58 20  EX_QUERY_PREFIX 
2c60: 20 20 20 20 30 78 30 30 30 31 20 20 20 2f 2a 20      0x0001   /* 
2c70: 50 72 65 66 69 78 20 71 75 65 72 79 20 2a 2f 0a  Prefix query */.
2c80: 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44 45  #define FTS5INDE
2c90: 58 5f 51 55 45 52 59 5f 44 45 53 43 20 20 20 20  X_QUERY_DESC    
2ca0: 20 20 20 30 78 30 30 30 32 20 20 20 2f 2a 20 44     0x0002   /* D
2cb0: 6f 63 73 20 69 6e 20 64 65 73 63 65 6e 64 69 6e  ocs in descendin
2cc0: 67 20 72 6f 77 69 64 20 6f 72 64 65 72 20 2a 2f  g rowid order */
2cd0: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49 4e 44  .#define FTS5IND
2ce0: 45 58 5f 51 55 45 52 59 5f 54 45 53 54 5f 4e 4f  EX_QUERY_TEST_NO
2cf0: 49 44 58 20 30 78 30 30 30 34 20 20 20 2f 2a 20  IDX 0x0004   /* 
2d00: 44 6f 20 6e 6f 74 20 75 73 65 20 70 72 65 66 69  Do not use prefi
2d10: 78 20 69 6e 64 65 78 20 2a 2f 0a 23 64 65 66 69  x index */.#defi
2d20: 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45  ne FTS5INDEX_QUE
2d30: 52 59 5f 53 43 41 4e 20 20 20 20 20 20 20 30 78  RY_SCAN       0x
2d40: 30 30 30 38 20 20 20 2f 2a 20 53 63 61 6e 20 71  0008   /* Scan q
2d50: 75 65 72 79 20 28 66 74 73 35 76 6f 63 61 62 29  uery (fts5vocab)
2d60: 20 2a 2f 0a 0a 2f 2a 20 54 68 65 20 66 6f 6c 6c   */../* The foll
2d70: 6f 77 69 6e 67 20 61 72 65 20 75 73 65 64 20 69  owing are used i
2d80: 6e 74 65 72 6e 61 6c 6c 79 20 62 79 20 74 68 65  nternally by the
2d90: 20 66 74 73 35 5f 69 6e 64 65 78 2e 63 20 6d 6f   fts5_index.c mo
2da0: 64 75 6c 65 2e 20 54 68 65 79 20 61 72 65 0a 2a  dule. They are.*
2db0: 2a 20 64 65 66 69 6e 65 64 20 68 65 72 65 20 6f  * defined here o
2dc0: 6e 6c 79 20 74 6f 20 6d 61 6b 65 20 69 74 20 65  nly to make it e
2dd0: 61 73 69 65 72 20 74 6f 20 61 76 6f 69 64 20 63  asier to avoid c
2de0: 6c 61 73 68 65 73 20 77 69 74 68 20 74 68 65 20  lashes with the 
2df0: 66 6c 61 67 73 0a 2a 2a 20 61 62 6f 76 65 2e 20  flags.** above. 
2e00: 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35 49  */.#define FTS5I
2e10: 4e 44 45 58 5f 51 55 45 52 59 5f 53 4b 49 50 45  NDEX_QUERY_SKIPE
2e20: 4d 50 54 59 20 20 30 78 30 30 31 30 0a 23 64 65  MPTY  0x0010.#de
2e30: 66 69 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51  fine FTS5INDEX_Q
2e40: 55 45 52 59 5f 4e 4f 4f 55 54 50 55 54 20 20 20  UERY_NOOUTPUT   
2e50: 30 78 30 30 32 30 0a 0a 2f 2a 0a 2a 2a 20 43 72  0x0020../*.** Cr
2e60: 65 61 74 65 2f 64 65 73 74 72 6f 79 20 61 6e 20  eate/destroy an 
2e70: 46 74 73 35 49 6e 64 65 78 20 6f 62 6a 65 63 74  Fts5Index object
2e80: 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  ..*/.int sqlite3
2e90: 46 74 73 35 49 6e 64 65 78 4f 70 65 6e 28 46 74  Fts5IndexOpen(Ft
2ea0: 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e 66 69  s5Config *pConfi
2eb0: 67 2c 20 69 6e 74 20 62 43 72 65 61 74 65 2c 20  g, int bCreate, 
2ec0: 46 74 73 35 49 6e 64 65 78 2a 2a 2c 20 63 68 61  Fts5Index**, cha
2ed0: 72 2a 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  r**);.int sqlite
2ee0: 33 46 74 73 35 49 6e 64 65 78 43 6c 6f 73 65 28  3Fts5IndexClose(
2ef0: 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a  Fts5Index *p);..
2f00: 2f 2a 0a 2a 2a 20 52 65 74 75 72 6e 20 61 20 73  /*.** Return a s
2f10: 69 6d 70 6c 65 20 63 68 65 63 6b 73 75 6d 20 76  imple checksum v
2f20: 61 6c 75 65 20 62 61 73 65 64 20 6f 6e 20 74 68  alue based on th
2f30: 65 20 61 72 67 75 6d 65 6e 74 73 2e 0a 2a 2f 0a  e arguments..*/.
2f40: 75 36 34 20 73 71 6c 69 74 65 33 46 74 73 35 49  u64 sqlite3Fts5I
2f50: 6e 64 65 78 45 6e 74 72 79 43 6b 73 75 6d 28 0a  ndexEntryCksum(.
2f60: 20 20 69 36 34 20 69 52 6f 77 69 64 2c 20 0a 20    i64 iRowid, . 
2f70: 20 69 6e 74 20 69 43 6f 6c 2c 20 0a 20 20 69 6e   int iCol, .  in
2f80: 74 20 69 50 6f 73 2c 20 0a 20 20 69 6e 74 20 69  t iPos, .  int i
2f90: 49 64 78 2c 0a 20 20 63 6f 6e 73 74 20 63 68 61  Idx,.  const cha
2fa0: 72 20 2a 70 54 65 72 6d 2c 0a 20 20 69 6e 74 20  r *pTerm,.  int 
2fb0: 6e 54 65 72 6d 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20  nTerm.);../*.** 
2fc0: 41 72 67 75 6d 65 6e 74 20 70 20 70 6f 69 6e 74  Argument p point
2fd0: 73 20 74 6f 20 61 20 62 75 66 66 65 72 20 63 6f  s to a buffer co
2fe0: 6e 74 61 69 6e 69 6e 67 20 75 74 66 2d 38 20 74  ntaining utf-8 t
2ff0: 65 78 74 20 74 68 61 74 20 69 73 20 6e 20 62 79  ext that is n by
3000: 74 65 73 20 69 6e 20 0a 2a 2a 20 73 69 7a 65 2e  tes in .** size.
3010: 20 52 65 74 75 72 6e 20 74 68 65 20 6e 75 6d 62   Return the numb
3020: 65 72 20 6f 66 20 62 79 74 65 73 20 69 6e 20 74  er of bytes in t
3030: 68 65 20 6e 43 68 61 72 20 63 68 61 72 61 63 74  he nChar charact
3040: 65 72 20 70 72 65 66 69 78 20 6f 66 20 74 68 65  er prefix of the
3050: 0a 2a 2a 20 62 75 66 66 65 72 2c 20 6f 72 20 30  .** buffer, or 0
3060: 20 69 66 20 74 68 65 72 65 20 61 72 65 20 6c 65   if there are le
3070: 73 73 20 74 68 61 6e 20 6e 43 68 61 72 20 63 68  ss than nChar ch
3080: 61 72 61 63 74 65 72 73 20 69 6e 20 74 6f 74 61  aracters in tota
3090: 6c 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  l..*/.int sqlite
30a0: 33 46 74 73 35 49 6e 64 65 78 43 68 61 72 6c 65  3Fts5IndexCharle
30b0: 6e 54 6f 42 79 74 65 6c 65 6e 28 0a 20 20 63 6f  nToBytelen(.  co
30c0: 6e 73 74 20 63 68 61 72 20 2a 70 2c 20 0a 20 20  nst char *p, .  
30d0: 69 6e 74 20 6e 42 79 74 65 2c 20 0a 20 20 69 6e  int nByte, .  in
30e0: 74 20 6e 43 68 61 72 0a 29 3b 0a 0a 2f 2a 0a 2a  t nChar.);../*.*
30f0: 2a 20 4f 70 65 6e 20 61 20 6e 65 77 20 69 74 65  * Open a new ite
3100: 72 61 74 6f 72 20 74 6f 20 69 74 65 72 61 74 65  rator to iterate
3110: 20 74 68 6f 75 67 68 20 61 6c 6c 20 72 6f 77 69   though all rowi
3120: 64 73 20 74 68 61 74 20 6d 61 74 63 68 20 74 68  ds that match th
3130: 65 20 0a 2a 2a 20 73 70 65 63 69 66 69 65 64 20  e .** specified 
3140: 74 6f 6b 65 6e 20 6f 72 20 74 6f 6b 65 6e 20 70  token or token p
3150: 72 65 66 69 78 2e 0a 2a 2f 0a 69 6e 74 20 73 71  refix..*/.int sq
3160: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 51 75  lite3Fts5IndexQu
3170: 65 72 79 28 0a 20 20 46 74 73 35 49 6e 64 65 78  ery(.  Fts5Index
3180: 20 2a 70 2c 20 20 20 20 20 20 20 20 20 20 20 20   *p,            
3190: 20 20 20 20 20 20 20 2f 2a 20 46 54 53 20 69 6e         /* FTS in
31a0: 64 65 78 20 74 6f 20 71 75 65 72 79 20 2a 2f 0a  dex to query */.
31b0: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54    const char *pT
31c0: 6f 6b 65 6e 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e  oken, int nToken
31d0: 2c 20 2f 2a 20 54 6f 6b 65 6e 20 28 6f 72 20 70  , /* Token (or p
31e0: 72 65 66 69 78 29 20 74 6f 20 71 75 65 72 79 20  refix) to query 
31f0: 66 6f 72 20 2a 2f 0a 20 20 69 6e 74 20 66 6c 61  for */.  int fla
3200: 67 73 2c 20 20 20 20 20 20 20 20 20 20 20 20 20  gs,             
3210: 20 20 20 20 20 20 20 20 20 2f 2a 20 4d 61 73 6b           /* Mask
3220: 20 6f 66 20 46 54 53 35 49 4e 44 45 58 5f 51 55   of FTS5INDEX_QU
3230: 45 52 59 5f 58 20 66 6c 61 67 73 20 2a 2f 0a 20  ERY_X flags */. 
3240: 20 46 74 73 35 43 6f 6c 73 65 74 20 2a 70 43 6f   Fts5Colset *pCo
3250: 6c 73 65 74 2c 20 20 20 20 20 20 20 20 20 20 20  lset,           
3260: 20 2f 2a 20 4d 61 74 63 68 20 74 68 65 73 65 20   /* Match these 
3270: 63 6f 6c 75 6d 6e 73 20 6f 6e 6c 79 20 2a 2f 0a  columns only */.
3280: 20 20 46 74 73 35 49 6e 64 65 78 49 74 65 72 20    Fts5IndexIter 
3290: 2a 2a 70 70 49 74 65 72 20 20 20 20 20 20 20 20  **ppIter        
32a0: 20 20 2f 2a 20 4f 55 54 3a 20 4e 65 77 20 69 74    /* OUT: New it
32b0: 65 72 61 74 6f 72 20 6f 62 6a 65 63 74 20 2a 2f  erator object */
32c0: 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 54 68 65 20 76  .);../*.** The v
32d0: 61 72 69 6f 75 73 20 6f 70 65 72 61 74 69 6f 6e  arious operation
32e0: 73 20 6f 6e 20 6f 70 65 6e 20 74 6f 6b 65 6e 20  s on open token 
32f0: 6f 72 20 74 6f 6b 65 6e 20 70 72 65 66 69 78 20  or token prefix 
3300: 69 74 65 72 61 74 6f 72 73 20 6f 70 65 6e 65 64  iterators opened
3310: 0a 2a 2a 20 75 73 69 6e 67 20 73 71 6c 69 74 65  .** using sqlite
3320: 33 46 74 73 35 49 6e 64 65 78 51 75 65 72 79 28  3Fts5IndexQuery(
3330: 29 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  )..*/.int sqlite
3340: 33 46 74 73 35 49 74 65 72 4e 65 78 74 28 46 74  3Fts5IterNext(Ft
3350: 73 35 49 6e 64 65 78 49 74 65 72 2a 29 3b 0a 69  s5IndexIter*);.i
3360: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 74  nt sqlite3Fts5It
3370: 65 72 4e 65 78 74 46 72 6f 6d 28 46 74 73 35 49  erNextFrom(Fts5I
3380: 6e 64 65 78 49 74 65 72 2a 2c 20 69 36 34 20 69  ndexIter*, i64 i
3390: 4d 61 74 63 68 29 3b 0a 0a 2f 2a 0a 2a 2a 20 43  Match);../*.** C
33a0: 6c 6f 73 65 20 61 6e 20 69 74 65 72 61 74 6f 72  lose an iterator
33b0: 20 6f 70 65 6e 65 64 20 62 79 20 73 71 6c 69 74   opened by sqlit
33c0: 65 33 46 74 73 35 49 6e 64 65 78 51 75 65 72 79  e3Fts5IndexQuery
33d0: 28 29 2e 0a 2a 2f 0a 76 6f 69 64 20 73 71 6c 69  ()..*/.void sqli
33e0: 74 65 33 46 74 73 35 49 74 65 72 43 6c 6f 73 65  te3Fts5IterClose
33f0: 28 46 74 73 35 49 6e 64 65 78 49 74 65 72 2a 29  (Fts5IndexIter*)
3400: 3b 0a 0a 2f 2a 0a 2a 2a 20 54 68 69 73 20 69 6e  ;../*.** This in
3410: 74 65 72 66 61 63 65 20 69 73 20 75 73 65 64 20  terface is used 
3420: 62 79 20 74 68 65 20 66 74 73 35 76 6f 63 61 62  by the fts5vocab
3430: 20 6d 6f 64 75 6c 65 2e 0a 2a 2f 0a 63 6f 6e 73   module..*/.cons
3440: 74 20 63 68 61 72 20 2a 73 71 6c 69 74 65 33 46  t char *sqlite3F
3450: 74 73 35 49 74 65 72 54 65 72 6d 28 46 74 73 35  ts5IterTerm(Fts5
3460: 49 6e 64 65 78 49 74 65 72 2a 2c 20 69 6e 74 2a  IndexIter*, int*
3470: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  );.int sqlite3Ft
3480: 73 35 49 74 65 72 4e 65 78 74 53 63 61 6e 28 46  s5IterNextScan(F
3490: 74 73 35 49 6e 64 65 78 49 74 65 72 2a 29 3b 0a  ts5IndexIter*);.
34a0: 0a 0a 2f 2a 0a 2a 2a 20 49 6e 73 65 72 74 20 6f  ../*.** Insert o
34b0: 72 20 72 65 6d 6f 76 65 20 64 61 74 61 20 74 6f  r remove data to
34c0: 20 6f 72 20 66 72 6f 6d 20 74 68 65 20 69 6e 64   or from the ind
34d0: 65 78 2e 20 45 61 63 68 20 74 69 6d 65 20 61 20  ex. Each time a 
34e0: 64 6f 63 75 6d 65 6e 74 20 69 73 20 0a 2a 2a 20  document is .** 
34f0: 61 64 64 65 64 20 74 6f 20 6f 72 20 72 65 6d 6f  added to or remo
3500: 76 65 64 20 66 72 6f 6d 20 74 68 65 20 69 6e 64  ved from the ind
3510: 65 78 2c 20 74 68 69 73 20 66 75 6e 63 74 69 6f  ex, this functio
3520: 6e 20 69 73 20 63 61 6c 6c 65 64 20 6f 6e 65 20  n is called one 
3530: 6f 72 20 6d 6f 72 65 0a 2a 2a 20 74 69 6d 65 73  or more.** times
3540: 2e 0a 2a 2a 0a 2a 2a 20 46 6f 72 20 61 6e 20 69  ..**.** For an i
3550: 6e 73 65 72 74 2c 20 69 74 20 6d 75 73 74 20 62  nsert, it must b
3560: 65 20 63 61 6c 6c 65 64 20 6f 6e 63 65 20 66 6f  e called once fo
3570: 72 20 65 61 63 68 20 74 6f 6b 65 6e 20 69 6e 20  r each token in 
3580: 74 68 65 20 6e 65 77 20 64 6f 63 75 6d 65 6e 74  the new document
3590: 2e 0a 2a 2a 20 49 66 20 74 68 65 20 6f 70 65 72  ..** If the oper
35a0: 61 74 69 6f 6e 20 69 73 20 61 20 64 65 6c 65 74  ation is a delet
35b0: 65 2c 20 69 74 20 6d 75 73 74 20 62 65 20 63 61  e, it must be ca
35c0: 6c 6c 65 64 20 28 61 74 20 6c 65 61 73 74 29 20  lled (at least) 
35d0: 6f 6e 63 65 20 66 6f 72 20 65 61 63 68 0a 2a 2a  once for each.**
35e0: 20 75 6e 69 71 75 65 20 74 6f 6b 65 6e 20 69 6e   unique token in
35f0: 20 74 68 65 20 64 6f 63 75 6d 65 6e 74 20 77 69   the document wi
3600: 74 68 20 61 6e 20 69 43 6f 6c 20 76 61 6c 75 65  th an iCol value
3610: 20 6c 65 73 73 20 74 68 61 6e 20 7a 65 72 6f 2e   less than zero.
3620: 20 54 68 65 20 69 50 6f 73 0a 2a 2a 20 61 72 67   The iPos.** arg
3630: 75 6d 65 6e 74 20 69 73 20 69 67 6e 6f 72 65 64  ument is ignored
3640: 20 66 6f 72 20 61 20 64 65 6c 65 74 65 2e 0a 2a   for a delete..*
3650: 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  /.int sqlite3Fts
3660: 35 49 6e 64 65 78 57 72 69 74 65 28 0a 20 20 46  5IndexWrite(.  F
3670: 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 20 20 20  ts5Index *p,    
3680: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
3690: 2a 20 49 6e 64 65 78 20 74 6f 20 77 72 69 74 65  * Index to write
36a0: 20 74 6f 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f   to */.  int iCo
36b0: 6c 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20  l,              
36c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c 75           /* Colu
36d0: 6d 6e 20 74 6f 6b 65 6e 20 61 70 70 65 61 72 73  mn token appears
36e0: 20 69 6e 20 28 2d 76 65 20 2d 3e 20 64 65 6c 65   in (-ve -> dele
36f0: 74 65 29 20 2a 2f 0a 20 20 69 6e 74 20 69 50 6f  te) */.  int iPo
3700: 73 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20  s,              
3710: 20 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73 69           /* Posi
3720: 74 69 6f 6e 20 6f 66 20 74 6f 6b 65 6e 20 77 69  tion of token wi
3730: 74 68 69 6e 20 63 6f 6c 75 6d 6e 20 2a 2f 0a 20  thin column */. 
3740: 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 6f   const char *pTo
3750: 6b 65 6e 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e 20  ken, int nToken 
3760: 20 2f 2a 20 54 6f 6b 65 6e 20 74 6f 20 61 64 64   /* Token to add
3770: 20 6f 72 20 72 65 6d 6f 76 65 20 74 6f 20 6f 72   or remove to or
3780: 20 66 72 6f 6d 20 69 6e 64 65 78 20 2a 2f 0a 29   from index */.)
3790: 3b 0a 0a 2f 2a 0a 2a 2a 20 49 6e 64 69 63 61 74  ;../*.** Indicat
37a0: 65 20 74 68 61 74 20 73 75 62 73 65 71 75 65 6e  e that subsequen
37b0: 74 20 63 61 6c 6c 73 20 74 6f 20 73 71 6c 69 74  t calls to sqlit
37c0: 65 33 46 74 73 35 49 6e 64 65 78 57 72 69 74 65  e3Fts5IndexWrite
37d0: 28 29 20 70 65 72 74 61 69 6e 20 74 6f 0a 2a 2a  () pertain to.**
37e0: 20 64 6f 63 75 6d 65 6e 74 20 69 44 6f 63 69 64   document iDocid
37f0: 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  ..*/.int sqlite3
3800: 46 74 73 35 49 6e 64 65 78 42 65 67 69 6e 57 72  Fts5IndexBeginWr
3810: 69 74 65 28 0a 20 20 46 74 73 35 49 6e 64 65 78  ite(.  Fts5Index
3820: 20 2a 70 2c 20 20 20 20 20 20 20 20 20 20 20 20   *p,            
3830: 20 20 20 20 20 20 20 2f 2a 20 49 6e 64 65 78 20         /* Index 
3840: 74 6f 20 77 72 69 74 65 20 74 6f 20 2a 2f 0a 20  to write to */. 
3850: 20 69 6e 74 20 62 44 65 6c 65 74 65 2c 20 20 20   int bDelete,   
3860: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3870: 20 2f 2a 20 54 72 75 65 20 69 66 20 63 75 72 72   /* True if curr
3880: 65 6e 74 20 6f 70 65 72 61 74 69 6f 6e 20 69 73  ent operation is
3890: 20 61 20 64 65 6c 65 74 65 20 2a 2f 0a 20 20 69   a delete */.  i
38a0: 36 34 20 69 44 6f 63 69 64 20 20 20 20 20 20 20  64 iDocid       
38b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
38c0: 2a 20 44 6f 63 69 64 20 74 6f 20 61 64 64 20 6f  * Docid to add o
38d0: 72 20 72 65 6d 6f 76 65 20 64 61 74 61 20 66 72  r remove data fr
38e0: 6f 6d 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20  om */.);../*.** 
38f0: 46 6c 75 73 68 20 61 6e 79 20 64 61 74 61 20 73  Flush any data s
3900: 74 6f 72 65 64 20 69 6e 20 74 68 65 20 69 6e 2d  tored in the in-
3910: 6d 65 6d 6f 72 79 20 68 61 73 68 20 74 61 62 6c  memory hash tabl
3920: 65 73 20 74 6f 20 74 68 65 20 64 61 74 61 62 61  es to the databa
3930: 73 65 2e 0a 2a 2a 20 49 66 20 74 68 65 20 62 43  se..** If the bC
3940: 6f 6d 6d 69 74 20 66 6c 61 67 20 69 73 20 74 72  ommit flag is tr
3950: 75 65 2c 20 61 6c 73 6f 20 63 6c 6f 73 65 20 61  ue, also close a
3960: 6e 79 20 6f 70 65 6e 20 62 6c 6f 62 20 68 61 6e  ny open blob han
3970: 64 6c 65 73 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c  dles..*/.int sql
3980: 69 74 65 33 46 74 73 35 49 6e 64 65 78 53 79 6e  ite3Fts5IndexSyn
3990: 63 28 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20  c(Fts5Index *p, 
39a0: 69 6e 74 20 62 43 6f 6d 6d 69 74 29 3b 0a 0a 2f  int bCommit);../
39b0: 2a 0a 2a 2a 20 44 69 73 63 61 72 64 20 61 6e 79  *.** Discard any
39c0: 20 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20   data stored in 
39d0: 74 68 65 20 69 6e 2d 6d 65 6d 6f 72 79 20 68 61  the in-memory ha
39e0: 73 68 20 74 61 62 6c 65 73 2e 20 44 6f 20 6e 6f  sh tables. Do no
39f0: 74 20 77 72 69 74 65 20 69 74 0a 2a 2a 20 74 6f  t write it.** to
3a00: 20 74 68 65 20 64 61 74 61 62 61 73 65 2e 20 41   the database. A
3a10: 64 64 69 74 69 6f 6e 61 6c 6c 79 2c 20 61 73 73  dditionally, ass
3a20: 75 6d 65 20 74 68 61 74 20 74 68 65 20 63 6f 6e  ume that the con
3a30: 74 65 6e 74 73 20 6f 66 20 74 68 65 20 25 5f 64  tents of the %_d
3a40: 61 74 61 0a 2a 2a 20 74 61 62 6c 65 20 6d 61 79  ata.** table may
3a50: 20 68 61 76 65 20 63 68 61 6e 67 65 64 20 6f 6e   have changed on
3a60: 20 64 69 73 6b 2e 20 53 6f 20 61 6e 79 20 69 6e   disk. So any in
3a70: 2d 6d 65 6d 6f 72 79 20 63 61 63 68 65 73 20 6f  -memory caches o
3a80: 66 20 25 5f 64 61 74 61 20 0a 2a 2a 20 72 65 63  f %_data .** rec
3a90: 6f 72 64 73 20 6d 75 73 74 20 62 65 20 69 6e 76  ords must be inv
3aa0: 61 6c 69 64 61 74 65 64 2e 0a 2a 2f 0a 69 6e 74  alidated..*/.int
3ab0: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3ac0: 78 52 6f 6c 6c 62 61 63 6b 28 46 74 73 35 49 6e  xRollback(Fts5In
3ad0: 64 65 78 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20  dex *p);../*.** 
3ae0: 47 65 74 20 6f 72 20 73 65 74 20 74 68 65 20 22  Get or set the "
3af0: 61 76 65 72 61 67 65 73 22 20 76 61 6c 75 65 73  averages" values
3b00: 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  ..*/.int sqlite3
3b10: 46 74 73 35 49 6e 64 65 78 47 65 74 41 76 65 72  Fts5IndexGetAver
3b20: 61 67 65 73 28 46 74 73 35 49 6e 64 65 78 20 2a  ages(Fts5Index *
3b30: 70 2c 20 69 36 34 20 2a 70 6e 52 6f 77 2c 20 69  p, i64 *pnRow, i
3b40: 36 34 20 2a 61 6e 53 69 7a 65 29 3b 0a 69 6e 74  64 *anSize);.int
3b50: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3b60: 78 53 65 74 41 76 65 72 61 67 65 73 28 46 74 73  xSetAverages(Fts
3b70: 35 49 6e 64 65 78 20 2a 70 2c 20 63 6f 6e 73 74  5Index *p, const
3b80: 20 75 38 2a 2c 20 69 6e 74 29 3b 0a 0a 2f 2a 0a   u8*, int);../*.
3b90: 2a 2a 20 46 75 6e 63 74 69 6f 6e 73 20 63 61 6c  ** Functions cal
3ba0: 6c 65 64 20 62 79 20 74 68 65 20 73 74 6f 72 61  led by the stora
3bb0: 67 65 20 6d 6f 64 75 6c 65 20 61 73 20 70 61 72  ge module as par
3bc0: 74 20 6f 66 20 69 6e 74 65 67 72 69 74 79 2d 63  t of integrity-c
3bd0: 68 65 63 6b 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c  heck..*/.int sql
3be0: 69 74 65 33 46 74 73 35 49 6e 64 65 78 49 6e 74  ite3Fts5IndexInt
3bf0: 65 67 72 69 74 79 43 68 65 63 6b 28 46 74 73 35  egrityCheck(Fts5
3c00: 49 6e 64 65 78 2a 2c 20 75 36 34 20 63 6b 73 75  Index*, u64 cksu
3c10: 6d 29 3b 0a 0a 2f 2a 20 0a 2a 2a 20 43 61 6c 6c  m);../* .** Call
3c20: 65 64 20 64 75 72 69 6e 67 20 76 69 72 74 75 61  ed during virtua
3c30: 6c 20 6d 6f 64 75 6c 65 20 69 6e 69 74 69 61 6c  l module initial
3c40: 69 7a 61 74 69 6f 6e 20 74 6f 20 72 65 67 69 73  ization to regis
3c50: 74 65 72 20 55 44 46 20 0a 2a 2a 20 66 74 73 35  ter UDF .** fts5
3c60: 5f 64 65 63 6f 64 65 28 29 20 77 69 74 68 20 53  _decode() with S
3c70: 51 4c 69 74 65 20 0a 2a 2f 0a 69 6e 74 20 73 71  QLite .*/.int sq
3c80: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 49 6e  lite3Fts5IndexIn
3c90: 69 74 28 73 71 6c 69 74 65 33 2a 29 3b 0a 0a 69  it(sqlite3*);..i
3ca0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3cb0: 64 65 78 53 65 74 43 6f 6f 6b 69 65 28 46 74 73  dexSetCookie(Fts
3cc0: 35 49 6e 64 65 78 2a 2c 20 69 6e 74 29 3b 0a 0a  5Index*, int);..
3cd0: 2f 2a 0a 2a 2a 20 52 65 74 75 72 6e 20 74 68 65  /*.** Return the
3ce0: 20 74 6f 74 61 6c 20 6e 75 6d 62 65 72 20 6f 66   total number of
3cf0: 20 65 6e 74 72 69 65 73 20 72 65 61 64 20 66 72   entries read fr
3d00: 6f 6d 20 74 68 65 20 25 5f 64 61 74 61 20 74 61  om the %_data ta
3d10: 62 6c 65 20 62 79 20 0a 2a 2a 20 74 68 69 73 20  ble by .** this 
3d20: 63 6f 6e 6e 65 63 74 69 6f 6e 20 73 69 6e 63 65  connection since
3d30: 20 69 74 20 77 61 73 20 63 72 65 61 74 65 64 2e   it was created.
3d40: 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  .*/.int sqlite3F
3d50: 74 73 35 49 6e 64 65 78 52 65 61 64 73 28 46 74  ts5IndexReads(Ft
3d60: 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a 69 6e  s5Index *p);..in
3d70: 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64  t sqlite3Fts5Ind
3d80: 65 78 52 65 69 6e 69 74 28 46 74 73 35 49 6e 64  exReinit(Fts5Ind
3d90: 65 78 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69  ex *p);.int sqli
3da0: 74 65 33 46 74 73 35 49 6e 64 65 78 4f 70 74 69  te3Fts5IndexOpti
3db0: 6d 69 7a 65 28 46 74 73 35 49 6e 64 65 78 20 2a  mize(Fts5Index *
3dc0: 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  p);.int sqlite3F
3dd0: 74 73 35 49 6e 64 65 78 4d 65 72 67 65 28 46 74  ts5IndexMerge(Ft
3de0: 73 35 49 6e 64 65 78 20 2a 70 2c 20 69 6e 74 20  s5Index *p, int 
3df0: 6e 4d 65 72 67 65 29 3b 0a 69 6e 74 20 73 71 6c  nMerge);.int sql
3e00: 69 74 65 33 46 74 73 35 49 6e 64 65 78 52 65 73  ite3Fts5IndexRes
3e10: 65 74 28 46 74 73 35 49 6e 64 65 78 20 2a 70 29  et(Fts5Index *p)
3e20: 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  ;..int sqlite3Ft
3e30: 73 35 49 6e 64 65 78 4c 6f 61 64 43 6f 6e 66 69  s5IndexLoadConfi
3e40: 67 28 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b  g(Fts5Index *p);
3e50: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
3e60: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
3e70: 20 69 6e 20 66 74 73 35 5f 69 6e 64 65 78 2e 63   in fts5_index.c
3e80: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
3e90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ea0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3eb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f  ************/../
3ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
3f20: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
3f30: 69 6e 20 66 74 73 35 5f 76 61 72 69 6e 74 2e 63  in fts5_varint.c
3f40: 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  . .*/.int sqlite
3f50: 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 33 32  3Fts5GetVarint32
3f60: 28 63 6f 6e 73 74 20 75 6e 73 69 67 6e 65 64 20  (const unsigned 
3f70: 63 68 61 72 20 2a 70 2c 20 75 33 32 20 2a 76 29  char *p, u32 *v)
3f80: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
3f90: 35 47 65 74 56 61 72 69 6e 74 4c 65 6e 28 75 33  5GetVarintLen(u3
3fa0: 32 20 69 56 61 6c 29 3b 0a 75 38 20 73 71 6c 69  2 iVal);.u8 sqli
3fb0: 74 65 33 46 74 73 35 47 65 74 56 61 72 69 6e 74  te3Fts5GetVarint
3fc0: 28 63 6f 6e 73 74 20 75 6e 73 69 67 6e 65 64 20  (const unsigned 
3fd0: 63 68 61 72 2a 2c 20 75 36 34 2a 29 3b 0a 69 6e  char*, u64*);.in
3fe0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 50 75 74  t sqlite3Fts5Put
3ff0: 56 61 72 69 6e 74 28 75 6e 73 69 67 6e 65 64 20  Varint(unsigned 
4000: 63 68 61 72 20 2a 70 2c 20 75 36 34 20 76 29 3b  char *p, u64 v);
4010: 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 35 47 65  ..#define fts5Ge
4020: 74 56 61 72 69 6e 74 33 32 28 61 2c 62 29 20 73  tVarint32(a,b) s
4030: 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72  qlite3Fts5GetVar
4040: 69 6e 74 33 32 28 61 2c 28 75 33 32 2a 29 26 62  int32(a,(u32*)&b
4050: 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 47 65  ).#define fts5Ge
4060: 74 56 61 72 69 6e 74 20 20 20 20 73 71 6c 69 74  tVarint    sqlit
4070: 65 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 0a  e3Fts5GetVarint.
4080: 0a 23 64 65 66 69 6e 65 20 66 74 73 35 46 61 73  .#define fts5Fas
4090: 74 47 65 74 56 61 72 69 6e 74 33 32 28 61 2c 20  tGetVarint32(a, 
40a0: 69 4f 66 66 2c 20 6e 56 61 6c 29 20 7b 20 20 20  iOff, nVal) {   
40b0: 20 20 20 5c 0a 20 20 6e 56 61 6c 20 3d 20 28 61     \.  nVal = (a
40c0: 29 5b 69 4f 66 66 2b 2b 5d 3b 20 20 20 20 20 20  )[iOff++];      
40d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
40e0: 20 20 20 20 20 20 20 5c 0a 20 20 69 66 28 20 6e         \.  if( n
40f0: 56 61 6c 20 26 20 30 78 38 30 20 29 7b 20 20 20  Val & 0x80 ){   
4100: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4110: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 20 20 20             \.   
4120: 20 69 4f 66 66 2d 2d 3b 20 20 20 20 20 20 20 20   iOff--;        
4130: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4140: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 5c                 \
4150: 0a 20 20 20 20 69 4f 66 66 20 2b 3d 20 66 74 73  .    iOff += fts
4160: 35 47 65 74 56 61 72 69 6e 74 33 32 28 26 28 61  5GetVarint32(&(a
4170: 29 5b 69 4f 66 66 5d 2c 20 6e 56 61 6c 29 3b 20  )[iOff], nVal); 
4180: 20 20 20 5c 0a 20 20 7d 20 20 20 20 20 20 20 20     \.  }        
4190: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
41a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
41b0: 20 20 20 20 20 20 20 5c 0a 7d 0a 0a 0a 2f 2a 0a         \.}.../*.
41c0: 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66  ** End of interf
41d0: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
41e0: 74 73 35 5f 76 61 72 69 6e 74 2e 63 2e 0a 2a 2a  ts5_varint.c..**
41f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4230: 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a  ********/.../***
4240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4280: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72  *******.** Inter
4290: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
42a0: 66 74 73 35 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74  fts5.c. .*/..int
42b0: 20 73 71 6c 69 74 65 33 46 74 73 35 47 65 74 54   sqlite3Fts5GetT
42c0: 6f 6b 65 6e 69 7a 65 72 28 0a 20 20 46 74 73 35  okenizer(.  Fts5
42d0: 47 6c 6f 62 61 6c 2a 2c 20 0a 20 20 63 6f 6e 73  Global*, .  cons
42e0: 74 20 63 68 61 72 20 2a 2a 61 7a 41 72 67 2c 0a  t char **azArg,.
42f0: 20 20 69 6e 74 20 6e 41 72 67 2c 0a 20 20 46 74    int nArg,.  Ft
4300: 73 35 54 6f 6b 65 6e 69 7a 65 72 2a 2a 2c 0a 20  s5Tokenizer**,. 
4310: 20 66 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2a   fts5_tokenizer*
4320: 2a 2c 0a 20 20 63 68 61 72 20 2a 2a 70 7a 45 72  *,.  char **pzEr
4330: 72 0a 29 3b 0a 0a 46 74 73 35 49 6e 64 65 78 20  r.);..Fts5Index 
4340: 2a 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65  *sqlite3Fts5Inde
4350: 78 46 72 6f 6d 43 73 72 69 64 28 46 74 73 35 47  xFromCsrid(Fts5G
4360: 6c 6f 62 61 6c 2a 2c 20 69 36 34 2c 20 46 74 73  lobal*, i64, Fts
4370: 35 43 6f 6e 66 69 67 20 2a 2a 29 3b 0a 0a 2f 2a  5Config **);../*
4380: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
4390: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
43a0: 66 74 73 35 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  fts5.c..********
43b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43f0: 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  **/../**********
4400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4420: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4430: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4440: 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f  .** Interface to
4450: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 68 61   code in fts5_ha
4460: 73 68 2e 63 2e 20 0a 2a 2f 0a 74 79 70 65 64 65  sh.c. .*/.typede
4470: 66 20 73 74 72 75 63 74 20 46 74 73 35 48 61 73  f struct Fts5Has
4480: 68 20 46 74 73 35 48 61 73 68 3b 0a 0a 2f 2a 0a  h Fts5Hash;../*.
4490: 2a 2a 20 43 72 65 61 74 65 20 61 20 68 61 73 68  ** Create a hash
44a0: 20 74 61 62 6c 65 2c 20 66 72 65 65 20 61 20 68   table, free a h
44b0: 61 73 68 20 74 61 62 6c 65 2e 0a 2a 2f 0a 69 6e  ash table..*/.in
44c0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 48 61 73  t sqlite3Fts5Has
44d0: 68 4e 65 77 28 46 74 73 35 43 6f 6e 66 69 67 2a  hNew(Fts5Config*
44e0: 2c 20 46 74 73 35 48 61 73 68 2a 2a 2c 20 69 6e  , Fts5Hash**, in
44f0: 74 20 2a 70 6e 53 69 7a 65 29 3b 0a 76 6f 69 64  t *pnSize);.void
4500: 20 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68   sqlite3Fts5Hash
4510: 46 72 65 65 28 46 74 73 35 48 61 73 68 2a 29 3b  Free(Fts5Hash*);
4520: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
4530: 35 48 61 73 68 57 72 69 74 65 28 0a 20 20 46 74  5HashWrite(.  Ft
4540: 73 35 48 61 73 68 2a 2c 0a 20 20 69 36 34 20 69  s5Hash*,.  i64 i
4550: 52 6f 77 69 64 2c 20 20 20 20 20 20 20 20 20 20  Rowid,          
4560: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 52 6f             /* Ro
4570: 77 69 64 20 66 6f 72 20 74 68 69 73 20 65 6e 74  wid for this ent
4580: 72 79 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f 6c  ry */.  int iCol
4590: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
45a0: 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c 75 6d          /* Colum
45b0: 6e 20 74 6f 6b 65 6e 20 61 70 70 65 61 72 73 20  n token appears 
45c0: 69 6e 20 28 2d 76 65 20 2d 3e 20 64 65 6c 65 74  in (-ve -> delet
45d0: 65 29 20 2a 2f 0a 20 20 69 6e 74 20 69 50 6f 73  e) */.  int iPos
45e0: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
45f0: 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73 69 74          /* Posit
4600: 69 6f 6e 20 6f 66 20 74 6f 6b 65 6e 20 77 69 74  ion of token wit
4610: 68 69 6e 20 63 6f 6c 75 6d 6e 20 2a 2f 0a 20 20  hin column */.  
4620: 63 68 61 72 20 62 42 79 74 65 2c 0a 20 20 63 6f  char bByte,.  co
4630: 6e 73 74 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e  nst char *pToken
4640: 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e 20 20 2f 2a  , int nToken  /*
4650: 20 54 6f 6b 65 6e 20 74 6f 20 61 64 64 20 6f 72   Token to add or
4660: 20 72 65 6d 6f 76 65 20 74 6f 20 6f 72 20 66 72   remove to or fr
4670: 6f 6d 20 69 6e 64 65 78 20 2a 2f 0a 29 3b 0a 0a  om index */.);..
4680: 2f 2a 0a 2a 2a 20 45 6d 70 74 79 20 28 62 75 74  /*.** Empty (but
4690: 20 64 6f 20 6e 6f 74 20 64 65 6c 65 74 65 29 20   do not delete) 
46a0: 61 20 68 61 73 68 20 74 61 62 6c 65 2e 0a 2a 2f  a hash table..*/
46b0: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
46c0: 35 48 61 73 68 43 6c 65 61 72 28 46 74 73 35 48  5HashClear(Fts5H
46d0: 61 73 68 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  ash*);..int sqli
46e0: 74 65 33 46 74 73 35 48 61 73 68 51 75 65 72 79  te3Fts5HashQuery
46f0: 28 0a 20 20 46 74 73 35 48 61 73 68 2a 2c 20 20  (.  Fts5Hash*,  
4700: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4710: 20 20 20 20 2f 2a 20 48 61 73 68 20 74 61 62 6c      /* Hash tabl
4720: 65 20 74 6f 20 71 75 65 72 79 20 2a 2f 0a 20 20  e to query */.  
4730: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65 72  const char *pTer
4740: 6d 2c 20 69 6e 74 20 6e 54 65 72 6d 2c 20 20 20  m, int nTerm,   
4750: 2f 2a 20 51 75 65 72 79 20 74 65 72 6d 20 2a 2f  /* Query term */
4760: 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 2a 70 70  .  const u8 **pp
4770: 44 6f 63 6c 69 73 74 2c 20 20 20 20 20 20 20 20  Doclist,        
4780: 20 20 20 2f 2a 20 4f 55 54 3a 20 50 6f 69 6e 74     /* OUT: Point
4790: 65 72 20 74 6f 20 64 6f 63 6c 69 73 74 20 66 6f  er to doclist fo
47a0: 72 20 70 54 65 72 6d 20 2a 2f 0a 20 20 69 6e 74  r pTerm */.  int
47b0: 20 2a 70 6e 44 6f 63 6c 69 73 74 20 20 20 20 20   *pnDoclist     
47c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
47d0: 4f 55 54 3a 20 53 69 7a 65 20 6f 66 20 64 6f 63  OUT: Size of doc
47e0: 6c 69 73 74 20 69 6e 20 62 79 74 65 73 20 2a 2f  list in bytes */
47f0: 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .);..int sqlite3
4800: 46 74 73 35 48 61 73 68 53 63 61 6e 49 6e 69 74  Fts5HashScanInit
4810: 28 0a 20 20 46 74 73 35 48 61 73 68 2a 2c 20 20  (.  Fts5Hash*,  
4820: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4830: 20 20 20 20 2f 2a 20 48 61 73 68 20 74 61 62 6c      /* Hash tabl
4840: 65 20 74 6f 20 71 75 65 72 79 20 2a 2f 0a 20 20  e to query */.  
4850: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65 72  const char *pTer
4860: 6d 2c 20 69 6e 74 20 6e 54 65 72 6d 20 20 20 20  m, int nTerm    
4870: 2f 2a 20 51 75 65 72 79 20 70 72 65 66 69 78 20  /* Query prefix 
4880: 2a 2f 0a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  */.);.void sqlit
4890: 65 33 46 74 73 35 48 61 73 68 53 63 61 6e 4e 65  e3Fts5HashScanNe
48a0: 78 74 28 46 74 73 35 48 61 73 68 2a 29 3b 0a 69  xt(Fts5Hash*);.i
48b0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 48 61  nt sqlite3Fts5Ha
48c0: 73 68 53 63 61 6e 45 6f 66 28 46 74 73 35 48 61  shScanEof(Fts5Ha
48d0: 73 68 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  sh*);.void sqlit
48e0: 65 33 46 74 73 35 48 61 73 68 53 63 61 6e 45 6e  e3Fts5HashScanEn
48f0: 74 72 79 28 46 74 73 35 48 61 73 68 20 2a 2c 0a  try(Fts5Hash *,.
4900: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 2a 70    const char **p
4910: 7a 54 65 72 6d 2c 20 20 20 20 20 20 20 20 20 20  zTerm,          
4920: 20 20 2f 2a 20 4f 55 54 3a 20 74 65 72 6d 20 28    /* OUT: term (
4930: 6e 75 6c 2d 74 65 72 6d 69 6e 61 74 65 64 29 20  nul-terminated) 
4940: 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 2a  */.  const u8 **
4950: 70 70 44 6f 63 6c 69 73 74 2c 20 20 20 20 20 20  ppDoclist,      
4960: 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 70 6f 69       /* OUT: poi
4970: 6e 74 65 72 20 74 6f 20 64 6f 63 6c 69 73 74 20  nter to doclist 
4980: 2a 2f 0a 20 20 69 6e 74 20 2a 70 6e 44 6f 63 6c  */.  int *pnDocl
4990: 69 73 74 20 20 20 20 20 20 20 20 20 20 20 20 20  ist             
49a0: 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 73 69 7a       /* OUT: siz
49b0: 65 20 6f 66 20 64 6f 63 6c 69 73 74 20 69 6e 20  e of doclist in 
49c0: 62 79 74 65 73 20 2a 2f 0a 29 3b 0a 0a 0a 2f 2a  bytes */.);.../*
49d0: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
49e0: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
49f0: 66 74 73 35 5f 68 61 73 68 2e 63 2e 0a 2a 2a 2a  fts5_hash.c..***
4a00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a40: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
4a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a90: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
4aa0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
4ab0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 2e 20 66 74  s5_storage.c. ft
4ac0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 20 63 6f 6e  s5_storage.c con
4ad0: 74 61 69 6e 73 20 63 6f 6e 74 61 69 6e 73 20 0a  tains contains .
4ae0: 2a 2a 20 63 6f 64 65 20 74 6f 20 61 63 63 65 73  ** code to acces
4af0: 73 20 74 68 65 20 64 61 74 61 20 73 74 6f 72 65  s the data store
4b00: 64 20 69 6e 20 74 68 65 20 25 5f 63 6f 6e 74 65  d in the %_conte
4b10: 6e 74 20 61 6e 64 20 25 5f 64 6f 63 73 69 7a 65  nt and %_docsize
4b20: 20 74 61 62 6c 65 73 2e 0a 2a 2f 0a 0a 23 64 65   tables..*/..#de
4b30: 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f 53  fine FTS5_STMT_S
4b40: 43 41 4e 5f 41 53 43 20 20 30 20 20 20 20 20 2f  CAN_ASC  0     /
4b50: 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c 20  * SELECT rowid, 
4b60: 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f 52 44 45 52  * FROM ... ORDER
4b70: 20 42 59 20 31 20 41 53 43 20 2a 2f 0a 23 64 65   BY 1 ASC */.#de
4b80: 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f 53  fine FTS5_STMT_S
4b90: 43 41 4e 5f 44 45 53 43 20 31 20 20 20 20 20 2f  CAN_DESC 1     /
4ba0: 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c 20  * SELECT rowid, 
4bb0: 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f 52 44 45 52  * FROM ... ORDER
4bc0: 20 42 59 20 31 20 44 45 53 43 20 2a 2f 0a 23 64   BY 1 DESC */.#d
4bd0: 65 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f  efine FTS5_STMT_
4be0: 4c 4f 4f 4b 55 50 20 20 20 20 32 20 20 20 20 20  LOOKUP    2     
4bf0: 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c  /* SELECT rowid,
4c00: 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 57 48 45 52   * FROM ... WHER
4c10: 45 20 72 6f 77 69 64 3d 3f 20 2a 2f 0a 0a 74 79  E rowid=? */..ty
4c20: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
4c30: 35 53 74 6f 72 61 67 65 20 46 74 73 35 53 74 6f  5Storage Fts5Sto
4c40: 72 61 67 65 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  rage;..int sqlit
4c50: 65 33 46 74 73 35 53 74 6f 72 61 67 65 4f 70 65  e3Fts5StorageOpe
4c60: 6e 28 46 74 73 35 43 6f 6e 66 69 67 2a 2c 20 46  n(Fts5Config*, F
4c70: 74 73 35 49 6e 64 65 78 2a 2c 20 69 6e 74 2c 20  ts5Index*, int, 
4c80: 46 74 73 35 53 74 6f 72 61 67 65 2a 2a 2c 20 63  Fts5Storage**, c
4c90: 68 61 72 2a 2a 29 3b 0a 69 6e 74 20 73 71 6c 69  har**);.int sqli
4ca0: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 43 6c  te3Fts5StorageCl
4cb0: 6f 73 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ose(Fts5Storage 
4cc0: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  *p);.int sqlite3
4cd0: 46 74 73 35 53 74 6f 72 61 67 65 52 65 6e 61 6d  Fts5StorageRenam
4ce0: 65 28 46 74 73 35 53 74 6f 72 61 67 65 2a 2c 20  e(Fts5Storage*, 
4cf0: 63 6f 6e 73 74 20 63 68 61 72 20 2a 7a 4e 61 6d  const char *zNam
4d00: 65 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  e);..int sqlite3
4d10: 46 74 73 35 44 72 6f 70 41 6c 6c 28 46 74 73 35  Fts5DropAll(Fts5
4d20: 43 6f 6e 66 69 67 2a 29 3b 0a 69 6e 74 20 73 71  Config*);.int sq
4d30: 6c 69 74 65 33 46 74 73 35 43 72 65 61 74 65 54  lite3Fts5CreateT
4d40: 61 62 6c 65 28 46 74 73 35 43 6f 6e 66 69 67 2a  able(Fts5Config*
4d50: 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20 63  , const char*, c
4d60: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c  onst char*, int,
4d70: 20 63 68 61 72 20 2a 2a 29 3b 0a 0a 69 6e 74 20   char **);..int 
4d80: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4d90: 67 65 44 65 6c 65 74 65 28 46 74 73 35 53 74 6f  geDelete(Fts5Sto
4da0: 72 61 67 65 20 2a 70 2c 20 69 36 34 2c 20 73 71  rage *p, i64, sq
4db0: 6c 69 74 65 33 5f 76 61 6c 75 65 2a 2a 29 3b 0a  lite3_value**);.
4dc0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4dd0: 74 6f 72 61 67 65 43 6f 6e 74 65 6e 74 49 6e 73  torageContentIns
4de0: 65 72 74 28 46 74 73 35 53 74 6f 72 61 67 65 20  ert(Fts5Storage 
4df0: 2a 70 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75  *p, sqlite3_valu
4e00: 65 2a 2a 2c 20 69 36 34 2a 29 3b 0a 69 6e 74 20  e**, i64*);.int 
4e10: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4e20: 67 65 49 6e 64 65 78 49 6e 73 65 72 74 28 46 74  geIndexInsert(Ft
4e30: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 73 71  s5Storage *p, sq
4e40: 6c 69 74 65 33 5f 76 61 6c 75 65 2a 2a 2c 20 69  lite3_value**, i
4e50: 36 34 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  64);..int sqlite
4e60: 33 46 74 73 35 53 74 6f 72 61 67 65 49 6e 74 65  3Fts5StorageInte
4e70: 67 72 69 74 79 28 46 74 73 35 53 74 6f 72 61 67  grity(Fts5Storag
4e80: 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  e *p);..int sqli
4e90: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 53 74  te3Fts5StorageSt
4ea0: 6d 74 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  mt(Fts5Storage *
4eb0: 70 2c 20 69 6e 74 20 65 53 74 6d 74 2c 20 73 71  p, int eStmt, sq
4ec0: 6c 69 74 65 33 5f 73 74 6d 74 2a 2a 2c 20 63 68  lite3_stmt**, ch
4ed0: 61 72 2a 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69  ar**);.void sqli
4ee0: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 53 74  te3Fts5StorageSt
4ef0: 6d 74 52 65 6c 65 61 73 65 28 46 74 73 35 53 74  mtRelease(Fts5St
4f00: 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 65 53  orage *p, int eS
4f10: 74 6d 74 2c 20 73 71 6c 69 74 65 33 5f 73 74 6d  tmt, sqlite3_stm
4f20: 74 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  t*);..int sqlite
4f30: 33 46 74 73 35 53 74 6f 72 61 67 65 44 6f 63 73  3Fts5StorageDocs
4f40: 69 7a 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ize(Fts5Storage 
4f50: 2a 70 2c 20 69 36 34 20 69 52 6f 77 69 64 2c 20  *p, i64 iRowid, 
4f60: 69 6e 74 20 2a 61 43 6f 6c 29 3b 0a 69 6e 74 20  int *aCol);.int 
4f70: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4f80: 67 65 53 69 7a 65 28 46 74 73 35 53 74 6f 72 61  geSize(Fts5Stora
4f90: 67 65 20 2a 70 2c 20 69 6e 74 20 69 43 6f 6c 2c  ge *p, int iCol,
4fa0: 20 69 36 34 20 2a 70 6e 41 76 67 29 3b 0a 69 6e   i64 *pnAvg);.in
4fb0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f  t sqlite3Fts5Sto
4fc0: 72 61 67 65 52 6f 77 43 6f 75 6e 74 28 46 74 73  rageRowCount(Fts
4fd0: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 36 34  5Storage *p, i64
4fe0: 20 2a 70 6e 52 6f 77 29 3b 0a 0a 69 6e 74 20 73   *pnRow);..int s
4ff0: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
5000: 65 53 79 6e 63 28 46 74 73 35 53 74 6f 72 61 67  eSync(Fts5Storag
5010: 65 20 2a 70 2c 20 69 6e 74 20 62 43 6f 6d 6d 69  e *p, int bCommi
5020: 74 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  t);.int sqlite3F
5030: 74 73 35 53 74 6f 72 61 67 65 52 6f 6c 6c 62 61  ts5StorageRollba
5040: 63 6b 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  ck(Fts5Storage *
5050: 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  p);..int sqlite3
5060: 46 74 73 35 53 74 6f 72 61 67 65 43 6f 6e 66 69  Fts5StorageConfi
5070: 67 56 61 6c 75 65 28 0a 20 20 20 20 46 74 73 35  gValue(.    Fts5
5080: 53 74 6f 72 61 67 65 20 2a 70 2c 20 63 6f 6e 73  Storage *p, cons
5090: 74 20 63 68 61 72 2a 2c 20 73 71 6c 69 74 65 33  t char*, sqlite3
50a0: 5f 76 61 6c 75 65 2a 2c 20 69 6e 74 0a 29 3b 0a  _value*, int.);.
50b0: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
50c0: 53 74 6f 72 61 67 65 44 65 6c 65 74 65 41 6c 6c  StorageDeleteAll
50d0: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 29  (Fts5Storage *p)
50e0: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
50f0: 35 53 74 6f 72 61 67 65 52 65 62 75 69 6c 64 28  5StorageRebuild(
5100: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 29 3b  Fts5Storage *p);
5110: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
5120: 53 74 6f 72 61 67 65 4f 70 74 69 6d 69 7a 65 28  StorageOptimize(
5130: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 29 3b  Fts5Storage *p);
5140: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
5150: 53 74 6f 72 61 67 65 4d 65 72 67 65 28 46 74 73  StorageMerge(Fts
5160: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74  5Storage *p, int
5170: 20 6e 4d 65 72 67 65 29 3b 0a 69 6e 74 20 73 71   nMerge);.int sq
5180: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65  lite3Fts5Storage
5190: 52 65 73 65 74 28 46 74 73 35 53 74 6f 72 61 67  Reset(Fts5Storag
51a0: 65 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  e *p);../*.** En
51b0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
51c0: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 73  o code in fts5_s
51d0: 74 6f 72 61 67 65 2e 63 2e 0a 2a 2a 2a 2a 2a 2a  torage.c..******
51e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5220: 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a  ****/.../*******
5230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5270: 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65  ***.** Interface
5280: 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35   to code in fts5
5290: 5f 65 78 70 72 2e 63 2e 20 0a 2a 2f 0a 74 79 70  _expr.c. .*/.typ
52a0: 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35  edef struct Fts5
52b0: 45 78 70 72 20 46 74 73 35 45 78 70 72 3b 0a 74  Expr Fts5Expr;.t
52c0: 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74  ypedef struct Ft
52d0: 73 35 45 78 70 72 4e 6f 64 65 20 46 74 73 35 45  s5ExprNode Fts5E
52e0: 78 70 72 4e 6f 64 65 3b 0a 74 79 70 65 64 65 66  xprNode;.typedef
52f0: 20 73 74 72 75 63 74 20 46 74 73 35 50 61 72 73   struct Fts5Pars
5300: 65 20 46 74 73 35 50 61 72 73 65 3b 0a 74 79 70  e Fts5Parse;.typ
5310: 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35  edef struct Fts5
5320: 54 6f 6b 65 6e 20 46 74 73 35 54 6f 6b 65 6e 3b  Token Fts5Token;
5330: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20  .typedef struct 
5340: 46 74 73 35 45 78 70 72 50 68 72 61 73 65 20 46  Fts5ExprPhrase F
5350: 74 73 35 45 78 70 72 50 68 72 61 73 65 3b 0a 74  ts5ExprPhrase;.t
5360: 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74  ypedef struct Ft
5370: 73 35 45 78 70 72 4e 65 61 72 73 65 74 20 46 74  s5ExprNearset Ft
5380: 73 35 45 78 70 72 4e 65 61 72 73 65 74 3b 0a 0a  s5ExprNearset;..
5390: 73 74 72 75 63 74 20 46 74 73 35 54 6f 6b 65 6e  struct Fts5Token
53a0: 20 7b 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20   {.  const char 
53b0: 2a 70 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  *p;             
53c0: 20 20 20 20 20 2f 2a 20 54 6f 6b 65 6e 20 74 65       /* Token te
53d0: 78 74 20 28 6e 6f 74 20 4e 55 4c 4c 20 74 65 72  xt (not NULL ter
53e0: 6d 69 6e 61 74 65 64 29 20 2a 2f 0a 20 20 69 6e  minated) */.  in
53f0: 74 20 6e 3b 20 20 20 20 20 20 20 20 20 20 20 20  t n;            
5400: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
5410: 20 53 69 7a 65 20 6f 66 20 62 75 66 66 65 72 20   Size of buffer 
5420: 70 20 69 6e 20 62 79 74 65 73 20 2a 2f 0a 7d 3b  p in bytes */.};
5430: 0a 0a 2f 2a 20 50 61 72 73 65 20 61 20 4d 41 54  ../* Parse a MAT
5440: 43 48 20 65 78 70 72 65 73 73 69 6f 6e 2e 20 2a  CH expression. *
5450: 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  /.int sqlite3Fts
5460: 35 45 78 70 72 4e 65 77 28 0a 20 20 46 74 73 35  5ExprNew(.  Fts5
5470: 43 6f 6e 66 69 67 20 2a 70 43 6f 6e 66 69 67 2c  Config *pConfig,
5480: 20 0a 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a   .  const char *
5490: 7a 45 78 70 72 2c 0a 20 20 46 74 73 35 45 78 70  zExpr,.  Fts5Exp
54a0: 72 20 2a 2a 70 70 4e 65 77 2c 20 0a 20 20 63 68  r **ppNew, .  ch
54b0: 61 72 20 2a 2a 70 7a 45 72 72 0a 29 3b 0a 0a 2f  ar **pzErr.);../
54c0: 2a 0a 2a 2a 20 66 6f 72 28 72 63 20 3d 20 73 71  *.** for(rc = sq
54d0: 6c 69 74 65 33 46 74 73 35 45 78 70 72 46 69 72  lite3Fts5ExprFir
54e0: 73 74 28 70 45 78 70 72 2c 20 70 49 64 78 2c 20  st(pExpr, pIdx, 
54f0: 62 44 65 73 63 29 3b 0a 2a 2a 20 20 20 20 20 72  bDesc);.**     r
5500: 63 3d 3d 53 51 4c 49 54 45 5f 4f 4b 20 26 26 20  c==SQLITE_OK && 
5510: 30 3d 3d 73 71 6c 69 74 65 33 46 74 73 35 45 78  0==sqlite3Fts5Ex
5520: 70 72 45 6f 66 28 70 45 78 70 72 29 3b 0a 2a 2a  prEof(pExpr);.**
5530: 20 20 20 20 20 72 63 20 3d 20 73 71 6c 69 74 65       rc = sqlite
5540: 33 46 74 73 35 45 78 70 72 4e 65 78 74 28 70 45  3Fts5ExprNext(pE
5550: 78 70 72 29 0a 2a 2a 20 29 7b 0a 2a 2a 20 20 20  xpr).** ){.**   
5560: 2f 2f 20 54 68 65 20 64 6f 63 75 6d 65 6e 74 20  // The document 
5570: 77 69 74 68 20 72 6f 77 69 64 20 69 52 6f 77 69  with rowid iRowi
5580: 64 20 6d 61 74 63 68 65 73 20 74 68 65 20 65 78  d matches the ex
5590: 70 72 65 73 73 69 6f 6e 21 0a 2a 2a 20 20 20 69  pression!.**   i
55a0: 36 34 20 69 52 6f 77 69 64 20 3d 20 73 71 6c 69  64 iRowid = sqli
55b0: 74 65 33 46 74 73 35 45 78 70 72 52 6f 77 69 64  te3Fts5ExprRowid
55c0: 28 70 45 78 70 72 29 3b 0a 2a 2a 20 7d 0a 2a 2f  (pExpr);.** }.*/
55d0: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
55e0: 45 78 70 72 46 69 72 73 74 28 46 74 73 35 45 78  ExprFirst(Fts5Ex
55f0: 70 72 2a 2c 20 46 74 73 35 49 6e 64 65 78 20 2a  pr*, Fts5Index *
5600: 70 49 64 78 2c 20 69 36 34 20 69 4d 69 6e 2c 20  pIdx, i64 iMin, 
5610: 69 6e 74 20 62 44 65 73 63 29 3b 0a 69 6e 74 20  int bDesc);.int 
5620: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 4e  sqlite3Fts5ExprN
5630: 65 78 74 28 46 74 73 35 45 78 70 72 2a 2c 20 69  ext(Fts5Expr*, i
5640: 36 34 20 69 4d 61 78 29 3b 0a 69 6e 74 20 73 71  64 iMax);.int sq
5650: 6c 69 74 65 33 46 74 73 35 45 78 70 72 45 6f 66  lite3Fts5ExprEof
5660: 28 46 74 73 35 45 78 70 72 2a 29 3b 0a 69 36 34  (Fts5Expr*);.i64
5670: 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72   sqlite3Fts5Expr
5680: 52 6f 77 69 64 28 46 74 73 35 45 78 70 72 2a 29  Rowid(Fts5Expr*)
5690: 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  ;..void sqlite3F
56a0: 74 73 35 45 78 70 72 46 72 65 65 28 46 74 73 35  ts5ExprFree(Fts5
56b0: 45 78 70 72 2a 29 3b 0a 0a 2f 2a 20 43 61 6c 6c  Expr*);../* Call
56c0: 65 64 20 64 75 72 69 6e 67 20 73 74 61 72 74 75  ed during startu
56d0: 70 20 74 6f 20 72 65 67 69 73 74 65 72 20 61 20  p to register a 
56e0: 55 44 46 20 77 69 74 68 20 53 51 4c 69 74 65 20  UDF with SQLite 
56f0: 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  */.int sqlite3Ft
5700: 73 35 45 78 70 72 49 6e 69 74 28 46 74 73 35 47  s5ExprInit(Fts5G
5710: 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69 74 65 33 2a  lobal*, sqlite3*
5720: 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  );..int sqlite3F
5730: 74 73 35 45 78 70 72 50 68 72 61 73 65 43 6f 75  ts5ExprPhraseCou
5740: 6e 74 28 46 74 73 35 45 78 70 72 2a 29 3b 0a 69  nt(Fts5Expr*);.i
5750: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78  nt sqlite3Fts5Ex
5760: 70 72 50 68 72 61 73 65 53 69 7a 65 28 46 74 73  prPhraseSize(Fts
5770: 35 45 78 70 72 2a 2c 20 69 6e 74 20 69 50 68 72  5Expr*, int iPhr
5780: 61 73 65 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  ase);.int sqlite
5790: 33 46 74 73 35 45 78 70 72 50 6f 73 6c 69 73 74  3Fts5ExprPoslist
57a0: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74 2c  (Fts5Expr*, int,
57b0: 20 63 6f 6e 73 74 20 75 38 20 2a 2a 29 3b 0a 0a   const u8 **);..
57c0: 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46  typedef struct F
57d0: 74 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61  ts5PoslistPopula
57e0: 74 6f 72 20 46 74 73 35 50 6f 73 6c 69 73 74 50  tor Fts5PoslistP
57f0: 6f 70 75 6c 61 74 6f 72 3b 0a 46 74 73 35 50 6f  opulator;.Fts5Po
5800: 73 6c 69 73 74 50 6f 70 75 6c 61 74 6f 72 20 2a  slistPopulator *
5810: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 43  sqlite3Fts5ExprC
5820: 6c 65 61 72 50 6f 73 6c 69 73 74 73 28 46 74 73  learPoslists(Fts
5830: 35 45 78 70 72 2a 2c 20 69 6e 74 29 3b 0a 69 6e  5Expr*, int);.in
5840: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  t sqlite3Fts5Exp
5850: 72 50 6f 70 75 6c 61 74 65 50 6f 73 6c 69 73 74  rPopulatePoslist
5860: 73 28 0a 20 20 20 20 46 74 73 35 43 6f 6e 66 69  s(.    Fts5Confi
5870: 67 2a 2c 20 46 74 73 35 45 78 70 72 2a 2c 20 46  g*, Fts5Expr*, F
5880: 74 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61  ts5PoslistPopula
5890: 74 6f 72 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73 74  tor*, int, const
58a0: 20 63 68 61 72 2a 2c 20 69 6e 74 0a 29 3b 0a 76   char*, int.);.v
58b0: 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 45  oid sqlite3Fts5E
58c0: 78 70 72 43 68 65 63 6b 50 6f 73 6c 69 73 74 73  xprCheckPoslists
58d0: 28 46 74 73 35 45 78 70 72 2a 2c 20 69 36 34 29  (Fts5Expr*, i64)
58e0: 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  ;..int sqlite3Ft
58f0: 73 35 45 78 70 72 43 6c 6f 6e 65 50 68 72 61 73  s5ExprClonePhras
5900: 65 28 46 74 73 35 45 78 70 72 2a 2c 20 69 6e 74  e(Fts5Expr*, int
5910: 2c 20 46 74 73 35 45 78 70 72 2a 2a 29 3b 0a 0a  , Fts5Expr**);..
5920: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45  int sqlite3Fts5E
5930: 78 70 72 50 68 72 61 73 65 43 6f 6c 6c 69 73 74  xprPhraseCollist
5940: 28 46 74 73 35 45 78 70 72 20 2a 2c 20 69 6e 74  (Fts5Expr *, int
5950: 2c 20 63 6f 6e 73 74 20 75 38 20 2a 2a 2c 20 69  , const u8 **, i
5960: 6e 74 20 2a 29 3b 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a  nt *);../*******
5970: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5980: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5990: 2a 2a 2a 2a 0a 2a 2a 20 54 68 65 20 66 74 73 35  ****.** The fts5
59a0: 5f 65 78 70 72 2e 63 20 41 50 49 20 61 62 6f 76  _expr.c API abov
59b0: 65 20 74 68 69 73 20 70 6f 69 6e 74 20 69 73 20  e this point is 
59c0: 75 73 65 64 20 62 79 20 74 68 65 20 6f 74 68 65  used by the othe
59d0: 72 20 68 61 6e 64 2d 77 72 69 74 74 65 6e 0a 2a  r hand-written.*
59e0: 2a 20 43 20 63 6f 64 65 20 69 6e 20 74 68 69 73  * C code in this
59f0: 20 6d 6f 64 75 6c 65 2e 20 54 68 65 20 69 6e 74   module. The int
5a00: 65 72 66 61 63 65 73 20 62 65 6c 6f 77 20 74 68  erfaces below th
5a10: 69 73 20 70 6f 69 6e 74 20 61 72 65 20 63 61 6c  is point are cal
5a20: 6c 65 64 20 62 79 0a 2a 2a 20 74 68 65 20 70 61  led by.** the pa
5a30: 72 73 65 72 20 63 6f 64 65 20 69 6e 20 66 74 73  rser code in fts
5a40: 35 70 61 72 73 65 2e 79 2e 20 20 2a 2f 0a 0a 76  5parse.y.  */..v
5a50: 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50  oid sqlite3Fts5P
5a60: 61 72 73 65 45 72 72 6f 72 28 46 74 73 35 50 61  arseError(Fts5Pa
5a70: 72 73 65 20 2a 70 50 61 72 73 65 2c 20 63 6f 6e  rse *pParse, con
5a80: 73 74 20 63 68 61 72 20 2a 7a 46 6d 74 2c 20 2e  st char *zFmt, .
5a90: 2e 2e 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f  ..);..Fts5ExprNo
5aa0: 64 65 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50  de *sqlite3Fts5P
5ab0: 61 72 73 65 4e 6f 64 65 28 0a 20 20 46 74 73 35  arseNode(.  Fts5
5ac0: 50 61 72 73 65 20 2a 70 50 61 72 73 65 2c 0a 20  Parse *pParse,. 
5ad0: 20 69 6e 74 20 65 54 79 70 65 2c 0a 20 20 46 74   int eType,.  Ft
5ae0: 73 35 45 78 70 72 4e 6f 64 65 20 2a 70 4c 65 66  s5ExprNode *pLef
5af0: 74 2c 0a 20 20 46 74 73 35 45 78 70 72 4e 6f 64  t,.  Fts5ExprNod
5b00: 65 20 2a 70 52 69 67 68 74 2c 0a 20 20 46 74 73  e *pRight,.  Fts
5b10: 35 45 78 70 72 4e 65 61 72 73 65 74 20 2a 70 4e  5ExprNearset *pN
5b20: 65 61 72 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72  ear.);..Fts5Expr
5b30: 4e 6f 64 65 20 2a 73 71 6c 69 74 65 33 46 74 73  Node *sqlite3Fts
5b40: 35 50 61 72 73 65 49 6d 70 6c 69 63 69 74 41 6e  5ParseImplicitAn
5b50: 64 28 0a 20 20 46 74 73 35 50 61 72 73 65 20 2a  d(.  Fts5Parse *
5b60: 70 50 61 72 73 65 2c 0a 20 20 46 74 73 35 45 78  pParse,.  Fts5Ex
5b70: 70 72 4e 6f 64 65 20 2a 70 4c 65 66 74 2c 0a 20  prNode *pLeft,. 
5b80: 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a 70   Fts5ExprNode *p
5b90: 52 69 67 68 74 0a 29 3b 0a 0a 46 74 73 35 45 78  Right.);..Fts5Ex
5ba0: 70 72 50 68 72 61 73 65 20 2a 73 71 6c 69 74 65  prPhrase *sqlite
5bb0: 33 46 74 73 35 50 61 72 73 65 54 65 72 6d 28 0a  3Fts5ParseTerm(.
5bc0: 20 20 46 74 73 35 50 61 72 73 65 20 2a 70 50 61    Fts5Parse *pPa
5bd0: 72 73 65 2c 20 0a 20 20 46 74 73 35 45 78 70 72  rse, .  Fts5Expr
5be0: 50 68 72 61 73 65 20 2a 70 50 68 72 61 73 65 2c  Phrase *pPhrase,
5bf0: 20 0a 20 20 46 74 73 35 54 6f 6b 65 6e 20 2a 70   .  Fts5Token *p
5c00: 54 6f 6b 65 6e 2c 0a 20 20 69 6e 74 20 62 50 72  Token,.  int bPr
5c10: 65 66 69 78 0a 29 3b 0a 0a 46 74 73 35 45 78 70  efix.);..Fts5Exp
5c20: 72 4e 65 61 72 73 65 74 20 2a 73 71 6c 69 74 65  rNearset *sqlite
5c30: 33 46 74 73 35 50 61 72 73 65 4e 65 61 72 73 65  3Fts5ParseNearse
5c40: 74 28 0a 20 20 46 74 73 35 50 61 72 73 65 2a 2c  t(.  Fts5Parse*,
5c50: 20 0a 20 20 46 74 73 35 45 78 70 72 4e 65 61 72   .  Fts5ExprNear
5c60: 73 65 74 2a 2c 0a 20 20 46 74 73 35 45 78 70 72  set*,.  Fts5Expr
5c70: 50 68 72 61 73 65 2a 20 0a 29 3b 0a 0a 46 74 73  Phrase* .);..Fts
5c80: 35 43 6f 6c 73 65 74 20 2a 73 71 6c 69 74 65 33  5Colset *sqlite3
5c90: 46 74 73 35 50 61 72 73 65 43 6f 6c 73 65 74 28  Fts5ParseColset(
5ca0: 0a 20 20 46 74 73 35 50 61 72 73 65 2a 2c 20 0a  .  Fts5Parse*, .
5cb0: 20 20 46 74 73 35 43 6f 6c 73 65 74 2a 2c 20 0a    Fts5Colset*, .
5cc0: 20 20 46 74 73 35 54 6f 6b 65 6e 20 2a 0a 29 3b    Fts5Token *.);
5cd0: 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74  ..void sqlite3Ft
5ce0: 73 35 50 61 72 73 65 50 68 72 61 73 65 46 72 65  s5ParsePhraseFre
5cf0: 65 28 46 74 73 35 45 78 70 72 50 68 72 61 73 65  e(Fts5ExprPhrase
5d00: 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  *);.void sqlite3
5d10: 46 74 73 35 50 61 72 73 65 4e 65 61 72 73 65 74  Fts5ParseNearset
5d20: 46 72 65 65 28 46 74 73 35 45 78 70 72 4e 65 61  Free(Fts5ExprNea
5d30: 72 73 65 74 2a 29 3b 0a 76 6f 69 64 20 73 71 6c  rset*);.void sql
5d40: 69 74 65 33 46 74 73 35 50 61 72 73 65 4e 6f 64  ite3Fts5ParseNod
5d50: 65 46 72 65 65 28 46 74 73 35 45 78 70 72 4e 6f  eFree(Fts5ExprNo
5d60: 64 65 2a 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69  de*);..void sqli
5d70: 74 65 33 46 74 73 35 50 61 72 73 65 53 65 74 44  te3Fts5ParseSetD
5d80: 69 73 74 61 6e 63 65 28 46 74 73 35 50 61 72 73  istance(Fts5Pars
5d90: 65 2a 2c 20 46 74 73 35 45 78 70 72 4e 65 61 72  e*, Fts5ExprNear
5da0: 73 65 74 2a 2c 20 46 74 73 35 54 6f 6b 65 6e 2a  set*, Fts5Token*
5db0: 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  );.void sqlite3F
5dc0: 74 73 35 50 61 72 73 65 53 65 74 43 6f 6c 73 65  ts5ParseSetColse
5dd0: 74 28 46 74 73 35 50 61 72 73 65 2a 2c 20 46 74  t(Fts5Parse*, Ft
5de0: 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a 2c 20  s5ExprNearset*, 
5df0: 46 74 73 35 43 6f 6c 73 65 74 2a 29 3b 0a 76 6f  Fts5Colset*);.vo
5e00: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61  id sqlite3Fts5Pa
5e10: 72 73 65 43 6f 6c 73 65 74 4e 65 67 61 74 69 76  rseColsetNegativ
5e20: 65 28 46 74 73 35 50 61 72 73 65 2a 2c 20 69 6e  e(Fts5Parse*, in
5e30: 74 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  t);.void sqlite3
5e40: 46 74 73 35 50 61 72 73 65 46 69 6e 69 73 68 65  Fts5ParseFinishe
5e50: 64 28 46 74 73 35 50 61 72 73 65 20 2a 70 50 61  d(Fts5Parse *pPa
5e60: 72 73 65 2c 20 46 74 73 35 45 78 70 72 4e 6f 64  rse, Fts5ExprNod
5e70: 65 20 2a 70 29 3b 0a 76 6f 69 64 20 73 71 6c 69  e *p);.void sqli
5e80: 74 65 33 46 74 73 35 50 61 72 73 65 4e 65 61 72  te3Fts5ParseNear
5e90: 28 46 74 73 35 50 61 72 73 65 20 2a 70 50 61 72  (Fts5Parse *pPar
5ea0: 73 65 2c 20 46 74 73 35 54 6f 6b 65 6e 2a 29 3b  se, Fts5Token*);
5eb0: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
5ec0: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
5ed0: 20 69 6e 20 66 74 73 35 5f 65 78 70 72 2e 63 2e   in fts5_expr.c.
5ee0: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  .***************
5ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 0a  ***********/....
5f30: 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  /***************
5f40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49  ***********.** I
5f80: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
5f90: 20 69 6e 20 66 74 73 35 5f 61 75 78 2e 63 2e 20   in fts5_aux.c. 
5fa0: 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .*/..int sqlite3
5fb0: 46 74 73 35 41 75 78 49 6e 69 74 28 66 74 73 35  Fts5AuxInit(fts5
5fc0: 5f 61 70 69 2a 29 3b 0a 2f 2a 0a 2a 2a 20 45 6e  _api*);./*.** En
5fd0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
5fe0: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 61  o code in fts5_a
5ff0: 75 78 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ux.c..**********
6000: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6010: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6020: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6030: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6040: 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  /../************
6050: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6060: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6070: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6080: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a  **************.*
6090: 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20 63  * Interface to c
60a0: 6f 64 65 20 69 6e 20 66 74 73 35 5f 74 6f 6b 65  ode in fts5_toke
60b0: 6e 69 7a 65 72 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e  nizer.c. .*/..in
60c0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 54 6f 6b  t sqlite3Fts5Tok
60d0: 65 6e 69 7a 65 72 49 6e 69 74 28 66 74 73 35 5f  enizerInit(fts5_
60e0: 61 70 69 2a 29 3b 0a 2f 2a 0a 2a 2a 20 45 6e 64  api*);./*.** End
60f0: 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f   of interface to
6100: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 74 6f   code in fts5_to
6110: 6b 65 6e 69 7a 65 72 2e 63 2e 0a 2a 2a 2a 2a 2a  kenizer.c..*****
6120: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6160: 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a  *****/../*******
6170: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6180: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6190: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61b0: 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65  ***.** Interface
61c0: 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35   to code in fts5
61d0: 5f 76 6f 63 61 62 2e 63 2e 20 0a 2a 2f 0a 0a 69  _vocab.c. .*/..i
61e0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 56 6f  nt sqlite3Fts5Vo
61f0: 63 61 62 49 6e 69 74 28 46 74 73 35 47 6c 6f 62  cabInit(Fts5Glob
6200: 61 6c 2a 2c 20 73 71 6c 69 74 65 33 2a 29 3b 0a  al*, sqlite3*);.
6210: 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e  ./*.** End of in
6220: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
6230: 69 6e 20 66 74 73 35 5f 76 6f 63 61 62 2e 63 2e  in fts5_vocab.c.
6240: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  .***************
6250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f  ***********/.../
6290: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
62e0: 74 65 72 66 61 63 65 20 74 6f 20 61 75 74 6f 6d  terface to autom
62f0: 61 74 69 63 61 6c 6c 79 20 67 65 6e 65 72 61 74  atically generat
6300: 65 64 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  ed code in fts5_
6310: 75 6e 69 63 6f 64 65 32 2e 63 2e 20 0a 2a 2f 0a  unicode2.c. .*/.
6320: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 55  int sqlite3Fts5U
6330: 6e 69 63 6f 64 65 49 73 61 6c 6e 75 6d 28 69 6e  nicodeIsalnum(in
6340: 74 20 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  t c);.int sqlite
6350: 33 46 74 73 35 55 6e 69 63 6f 64 65 49 73 64 69  3Fts5UnicodeIsdi
6360: 61 63 72 69 74 69 63 28 69 6e 74 20 63 29 3b 0a  acritic(int c);.
6370: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 55  int sqlite3Fts5U
6380: 6e 69 63 6f 64 65 46 6f 6c 64 28 69 6e 74 20 63  nicodeFold(int c
6390: 2c 20 69 6e 74 20 62 52 65 6d 6f 76 65 44 69 61  , int bRemoveDia
63a0: 63 72 69 74 69 63 29 3b 0a 2f 2a 0a 2a 2a 20 45  critic);./*.** E
63b0: 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20  nd of interface 
63c0: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  to code in fts5_
63d0: 75 6e 69 63 6f 64 65 32 2e 63 2e 0a 2a 2a 2a 2a  unicode2.c..****
63e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
63f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6420: 2a 2a 2a 2a 2a 2a 2f 0a 0a 23 65 6e 64 69 66 0a  ******/..#endif.