/ Hex Artifact Content
Login
SQLite training in Houston TX on 2019-11-05 (details)
Part of the 2019 Tcl Conference

Artifact c629b24d2b92b99596f3b8e82289fddca06df6e1:


0000: 2f 2a 0a 2a 2a 20 32 30 31 34 20 4d 61 79 20 33  /*.** 2014 May 3
0010: 31 0a 2a 2a 0a 2a 2a 20 54 68 65 20 61 75 74 68  1.**.** The auth
0020: 6f 72 20 64 69 73 63 6c 61 69 6d 73 20 63 6f 70  or disclaims cop
0030: 79 72 69 67 68 74 20 74 6f 20 74 68 69 73 20 73  yright to this s
0040: 6f 75 72 63 65 20 63 6f 64 65 2e 20 20 49 6e 20  ource code.  In 
0050: 70 6c 61 63 65 20 6f 66 0a 2a 2a 20 61 20 6c 65  place of.** a le
0060: 67 61 6c 20 6e 6f 74 69 63 65 2c 20 68 65 72 65  gal notice, here
0070: 20 69 73 20 61 20 62 6c 65 73 73 69 6e 67 3a 0a   is a blessing:.
0080: 2a 2a 0a 2a 2a 20 20 20 20 4d 61 79 20 79 6f 75  **.**    May you
0090: 20 64 6f 20 67 6f 6f 64 20 61 6e 64 20 6e 6f 74   do good and not
00a0: 20 65 76 69 6c 2e 0a 2a 2a 20 20 20 20 4d 61 79   evil..**    May
00b0: 20 79 6f 75 20 66 69 6e 64 20 66 6f 72 67 69 76   you find forgiv
00c0: 65 6e 65 73 73 20 66 6f 72 20 79 6f 75 72 73 65  eness for yourse
00d0: 6c 66 20 61 6e 64 20 66 6f 72 67 69 76 65 20 6f  lf and forgive o
00e0: 74 68 65 72 73 2e 0a 2a 2a 20 20 20 20 4d 61 79  thers..**    May
00f0: 20 79 6f 75 20 73 68 61 72 65 20 66 72 65 65 6c   you share freel
0100: 79 2c 20 6e 65 76 65 72 20 74 61 6b 69 6e 67 20  y, never taking 
0110: 6d 6f 72 65 20 74 68 61 6e 20 79 6f 75 20 67 69  more than you gi
0120: 76 65 2e 0a 2a 2a 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ve..**.*********
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0170: 2a 2a 2a 2a 2a 0a 2a 2a 0a 2a 2f 0a 23 69 66 6e  *****.**.*/.#ifn
0180: 64 65 66 20 5f 46 54 53 35 49 4e 54 5f 48 0a 23  def _FTS5INT_H.#
0190: 64 65 66 69 6e 65 20 5f 46 54 53 35 49 4e 54 5f  define _FTS5INT_
01a0: 48 0a 0a 23 69 6e 63 6c 75 64 65 20 22 66 74 73  H..#include "fts
01b0: 35 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 73  5.h".#include "s
01c0: 71 6c 69 74 65 33 65 78 74 2e 68 22 0a 53 51 4c  qlite3ext.h".SQL
01d0: 49 54 45 5f 45 58 54 45 4e 53 49 4f 4e 5f 49 4e  ITE_EXTENSION_IN
01e0: 49 54 31 0a 0a 23 69 6e 63 6c 75 64 65 20 3c 73  IT1..#include <s
01f0: 74 72 69 6e 67 2e 68 3e 0a 23 69 6e 63 6c 75 64  tring.h>.#includ
0200: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 23 69  e <assert.h>..#i
0210: 66 6e 64 65 66 20 53 51 4c 49 54 45 5f 41 4d 41  fndef SQLITE_AMA
0220: 4c 47 41 4d 41 54 49 4f 4e 0a 0a 74 79 70 65 64  LGAMATION..typed
0230: 65 66 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72  ef unsigned char
0240: 20 20 75 38 3b 0a 74 79 70 65 64 65 66 20 75 6e    u8;.typedef un
0250: 73 69 67 6e 65 64 20 69 6e 74 20 20 20 75 33 32  signed int   u32
0260: 3b 0a 74 79 70 65 64 65 66 20 75 6e 73 69 67 6e  ;.typedef unsign
0270: 65 64 20 73 68 6f 72 74 20 75 31 36 3b 0a 74 79  ed short u16;.ty
0280: 70 65 64 65 66 20 73 68 6f 72 74 20 69 31 36 3b  pedef short i16;
0290: 0a 74 79 70 65 64 65 66 20 73 71 6c 69 74 65 33  .typedef sqlite3
02a0: 5f 69 6e 74 36 34 20 69 36 34 3b 0a 74 79 70 65  _int64 i64;.type
02b0: 64 65 66 20 73 71 6c 69 74 65 33 5f 75 69 6e 74  def sqlite3_uint
02c0: 36 34 20 75 36 34 3b 0a 0a 23 69 66 6e 64 65 66  64 u64;..#ifndef
02d0: 20 41 72 72 61 79 53 69 7a 65 0a 23 20 64 65 66   ArraySize.# def
02e0: 69 6e 65 20 41 72 72 61 79 53 69 7a 65 28 78 29  ine ArraySize(x)
02f0: 20 28 28 69 6e 74 29 28 73 69 7a 65 6f 66 28 78   ((int)(sizeof(x
0300: 29 20 2f 20 73 69 7a 65 6f 66 28 78 5b 30 5d 29  ) / sizeof(x[0])
0310: 29 29 0a 23 65 6e 64 69 66 0a 0a 23 64 65 66 69  )).#endif..#defi
0320: 6e 65 20 74 65 73 74 63 61 73 65 28 78 29 0a 23  ne testcase(x).#
0330: 64 65 66 69 6e 65 20 41 4c 57 41 59 53 28 78 29  define ALWAYS(x)
0340: 20 31 0a 23 64 65 66 69 6e 65 20 4e 45 56 45 52   1.#define NEVER
0350: 28 78 29 20 30 0a 0a 23 64 65 66 69 6e 65 20 4d  (x) 0..#define M
0360: 49 4e 28 78 2c 79 29 20 28 28 28 78 29 20 3c 20  IN(x,y) (((x) < 
0370: 28 79 29 29 20 3f 20 28 78 29 20 3a 20 28 79 29  (y)) ? (x) : (y)
0380: 29 0a 23 64 65 66 69 6e 65 20 4d 41 58 28 78 2c  ).#define MAX(x,
0390: 79 29 20 28 28 28 78 29 20 3e 20 28 79 29 29 20  y) (((x) > (y)) 
03a0: 3f 20 28 78 29 20 3a 20 28 79 29 29 0a 0a 2f 2a  ? (x) : (y))../*
03b0: 0a 2a 2a 20 43 6f 6e 73 74 61 6e 74 73 20 66 6f  .** Constants fo
03c0: 72 20 74 68 65 20 6c 61 72 67 65 73 74 20 61 6e  r the largest an
03d0: 64 20 73 6d 61 6c 6c 65 73 74 20 70 6f 73 73 69  d smallest possi
03e0: 62 6c 65 20 36 34 2d 62 69 74 20 73 69 67 6e 65  ble 64-bit signe
03f0: 64 20 69 6e 74 65 67 65 72 73 2e 0a 2a 2f 0a 23  d integers..*/.#
0400: 20 64 65 66 69 6e 65 20 4c 41 52 47 45 53 54 5f   define LARGEST_
0410: 49 4e 54 36 34 20 20 28 30 78 66 66 66 66 66 66  INT64  (0xffffff
0420: 66 66 7c 28 28 28 69 36 34 29 30 78 37 66 66 66  ff|(((i64)0x7fff
0430: 66 66 66 66 29 3c 3c 33 32 29 29 0a 23 20 64 65  ffff)<<32)).# de
0440: 66 69 6e 65 20 53 4d 41 4c 4c 45 53 54 5f 49 4e  fine SMALLEST_IN
0450: 54 36 34 20 28 28 28 69 36 34 29 2d 31 29 20 2d  T64 (((i64)-1) -
0460: 20 4c 41 52 47 45 53 54 5f 49 4e 54 36 34 29 0a   LARGEST_INT64).
0470: 0a 23 65 6e 64 69 66 0a 0a 2f 2a 20 54 72 75 6e  .#endif../* Trun
0480: 63 61 74 65 20 76 65 72 79 20 6c 6f 6e 67 20 74  cate very long t
0490: 6f 6b 65 6e 73 20 74 6f 20 74 68 69 73 20 6d 61  okens to this ma
04a0: 6e 79 20 62 79 74 65 73 2e 20 48 61 72 64 20 6c  ny bytes. Hard l
04b0: 69 6d 69 74 20 69 73 20 0a 2a 2a 20 28 36 35 35  imit is .** (655
04c0: 33 36 2d 31 2d 31 2d 34 2d 39 29 3d 3d 36 35 35  36-1-1-4-9)==655
04d0: 32 31 20 62 79 74 65 73 2e 20 54 68 65 20 6c 69  21 bytes. The li
04e0: 6d 69 74 69 6e 67 20 66 61 63 74 6f 72 20 69 73  miting factor is
04f0: 20 74 68 65 20 31 36 2d 62 69 74 20 6f 66 66 73   the 16-bit offs
0500: 65 74 0a 2a 2a 20 66 69 65 6c 64 20 74 68 61 74  et.** field that
0510: 20 6f 63 63 75 72 73 20 61 74 20 74 68 65 20 73   occurs at the s
0520: 74 61 72 74 20 6f 66 20 65 61 63 68 20 6c 65 61  tart of each lea
0530: 66 20 70 61 67 65 20 28 73 65 65 20 66 74 73 35  f page (see fts5
0540: 5f 69 6e 64 65 78 2e 63 29 2e 20 2a 2f 0a 23 64  _index.c). */.#d
0550: 65 66 69 6e 65 20 46 54 53 35 5f 4d 41 58 5f 54  efine FTS5_MAX_T
0560: 4f 4b 45 4e 5f 53 49 5a 45 20 33 32 37 36 38 0a  OKEN_SIZE 32768.
0570: 0a 2f 2a 0a 2a 2a 20 4d 61 78 69 6d 75 6d 20 6e  ./*.** Maximum n
0580: 75 6d 62 65 72 20 6f 66 20 70 72 65 66 69 78 20  umber of prefix 
0590: 69 6e 64 65 78 65 73 20 6f 6e 20 73 69 6e 67 6c  indexes on singl
05a0: 65 20 46 54 53 35 20 74 61 62 6c 65 2e 20 54 68  e FTS5 table. Th
05b0: 69 73 20 6d 75 73 74 20 62 65 0a 2a 2a 20 6c 65  is must be.** le
05c0: 73 73 20 74 68 61 6e 20 33 32 2e 20 49 66 20 69  ss than 32. If i
05d0: 74 20 69 73 20 73 65 74 20 74 6f 20 61 6e 79 74  t is set to anyt
05e0: 68 69 6e 67 20 6c 61 72 67 65 20 74 68 61 6e 20  hing large than 
05f0: 74 68 61 74 2c 20 61 6e 20 23 65 72 72 6f 72 0a  that, an #error.
0600: 2a 2a 20 64 69 72 65 63 74 69 76 65 20 69 6e 20  ** directive in 
0610: 66 74 73 35 5f 69 6e 64 65 78 2e 63 20 77 69 6c  fts5_index.c wil
0620: 6c 20 63 61 75 73 65 20 74 68 65 20 62 75 69 6c  l cause the buil
0630: 64 20 74 6f 20 66 61 69 6c 2e 0a 2a 2f 0a 23 64  d to fail..*/.#d
0640: 65 66 69 6e 65 20 46 54 53 35 5f 4d 41 58 5f 50  efine FTS5_MAX_P
0650: 52 45 46 49 58 5f 49 4e 44 45 58 45 53 20 33 31  REFIX_INDEXES 31
0660: 0a 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 44  ..#define FTS5_D
0670: 45 46 41 55 4c 54 5f 4e 45 41 52 44 49 53 54 20  EFAULT_NEARDIST 
0680: 31 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f  10.#define FTS5_
0690: 44 45 46 41 55 4c 54 5f 52 41 4e 4b 20 20 20 20  DEFAULT_RANK    
06a0: 20 22 62 6d 32 35 22 0a 0a 2f 2a 20 4e 61 6d 65   "bm25"../* Name
06b0: 20 6f 66 20 72 61 6e 6b 20 61 6e 64 20 72 6f 77   of rank and row
06c0: 69 64 20 63 6f 6c 75 6d 6e 73 20 2a 2f 0a 23 64  id columns */.#d
06d0: 65 66 69 6e 65 20 46 54 53 35 5f 52 41 4e 4b 5f  efine FTS5_RANK_
06e0: 4e 41 4d 45 20 22 72 61 6e 6b 22 0a 23 64 65 66  NAME "rank".#def
06f0: 69 6e 65 20 46 54 53 35 5f 52 4f 57 49 44 5f 4e  ine FTS5_ROWID_N
0700: 41 4d 45 20 22 72 6f 77 69 64 22 0a 0a 23 69 66  AME "rowid"..#if
0710: 64 65 66 20 53 51 4c 49 54 45 5f 44 45 42 55 47  def SQLITE_DEBUG
0720: 0a 23 20 64 65 66 69 6e 65 20 46 54 53 35 5f 43  .# define FTS5_C
0730: 4f 52 52 55 50 54 20 73 71 6c 69 74 65 33 46 74  ORRUPT sqlite3Ft
0740: 73 35 43 6f 72 72 75 70 74 28 29 0a 69 6e 74 20  s5Corrupt().int 
0750: 73 71 6c 69 74 65 33 46 74 73 35 43 6f 72 72 75  sqlite3Fts5Corru
0760: 70 74 28 76 6f 69 64 29 3b 0a 23 65 6c 73 65 0a  pt(void);.#else.
0770: 23 20 64 65 66 69 6e 65 20 46 54 53 35 5f 43 4f  # define FTS5_CO
0780: 52 52 55 50 54 20 53 51 4c 49 54 45 5f 43 4f 52  RRUPT SQLITE_COR
0790: 52 55 50 54 5f 56 54 41 42 0a 23 65 6e 64 69 66  RUPT_VTAB.#endif
07a0: 0a 0a 2f 2a 0a 2a 2a 20 54 68 65 20 61 73 73 65  ../*.** The asse
07b0: 72 74 5f 6e 63 28 29 20 6d 61 63 72 6f 20 69 73  rt_nc() macro is
07c0: 20 73 69 6d 69 6c 61 72 20 74 6f 20 74 68 65 20   similar to the 
07d0: 61 73 73 65 72 74 28 29 20 6d 61 63 72 6f 2c 20  assert() macro, 
07e0: 65 78 63 65 70 74 20 74 68 61 74 20 69 74 0a 2a  except that it.*
07f0: 2a 20 69 73 20 75 73 65 64 20 66 6f 72 20 61 73  * is used for as
0800: 73 65 72 74 28 29 20 63 6f 6e 64 69 74 69 6f 6e  sert() condition
0810: 73 20 74 68 61 74 20 61 72 65 20 74 72 75 65 20  s that are true 
0820: 6f 6e 6c 79 20 69 66 20 69 74 20 63 61 6e 20 62  only if it can b
0830: 65 20 0a 2a 2a 20 67 75 72 61 6e 74 65 65 64 20  e .** guranteed 
0840: 74 68 61 74 20 74 68 65 20 64 61 74 61 62 61 73  that the databas
0850: 65 20 69 73 20 6e 6f 74 20 63 6f 72 72 75 70 74  e is not corrupt
0860: 2e 0a 2a 2f 0a 23 69 66 64 65 66 20 53 51 4c 49  ..*/.#ifdef SQLI
0870: 54 45 5f 44 45 42 55 47 0a 65 78 74 65 72 6e 20  TE_DEBUG.extern 
0880: 69 6e 74 20 73 71 6c 69 74 65 33 5f 66 74 73 35  int sqlite3_fts5
0890: 5f 6d 61 79 5f 62 65 5f 63 6f 72 72 75 70 74 3b  _may_be_corrupt;
08a0: 0a 23 20 64 65 66 69 6e 65 20 61 73 73 65 72 74  .# define assert
08b0: 5f 6e 63 28 78 29 20 61 73 73 65 72 74 28 73 71  _nc(x) assert(sq
08c0: 6c 69 74 65 33 5f 66 74 73 35 5f 6d 61 79 5f 62  lite3_fts5_may_b
08d0: 65 5f 63 6f 72 72 75 70 74 20 7c 7c 20 28 78 29  e_corrupt || (x)
08e0: 29 0a 23 65 6c 73 65 0a 23 20 64 65 66 69 6e 65  ).#else.# define
08f0: 20 61 73 73 65 72 74 5f 6e 63 28 78 29 20 61 73   assert_nc(x) as
0900: 73 65 72 74 28 78 29 0a 23 65 6e 64 69 66 0a 0a  sert(x).#endif..
0910: 2f 2a 20 4d 61 72 6b 20 61 20 66 75 6e 63 74 69  /* Mark a functi
0920: 6f 6e 20 70 61 72 61 6d 65 74 65 72 20 61 73 20  on parameter as 
0930: 75 6e 75 73 65 64 2c 20 74 6f 20 73 75 70 70 72  unused, to suppr
0940: 65 73 73 20 6e 75 69 73 61 6e 63 65 20 63 6f 6d  ess nuisance com
0950: 70 69 6c 65 72 0a 2a 2a 20 77 61 72 6e 69 6e 67  piler.** warning
0960: 73 2e 20 2a 2f 0a 23 69 66 6e 64 65 66 20 55 4e  s. */.#ifndef UN
0970: 55 53 45 44 5f 50 41 52 41 4d 0a 23 20 64 65 66  USED_PARAM.# def
0980: 69 6e 65 20 55 4e 55 53 45 44 5f 50 41 52 41 4d  ine UNUSED_PARAM
0990: 28 58 29 20 20 28 76 6f 69 64 29 28 58 29 0a 23  (X)  (void)(X).#
09a0: 65 6e 64 69 66 0a 0a 23 69 66 6e 64 65 66 20 55  endif..#ifndef U
09b0: 4e 55 53 45 44 5f 50 41 52 41 4d 32 0a 23 20 64  NUSED_PARAM2.# d
09c0: 65 66 69 6e 65 20 55 4e 55 53 45 44 5f 50 41 52  efine UNUSED_PAR
09d0: 41 4d 32 28 58 2c 20 59 29 20 20 28 76 6f 69 64  AM2(X, Y)  (void
09e0: 29 28 58 29 2c 20 28 76 6f 69 64 29 28 59 29 0a  )(X), (void)(Y).
09f0: 23 65 6e 64 69 66 0a 0a 74 79 70 65 64 65 66 20  #endif..typedef 
0a00: 73 74 72 75 63 74 20 46 74 73 35 47 6c 6f 62 61  struct Fts5Globa
0a10: 6c 20 46 74 73 35 47 6c 6f 62 61 6c 3b 0a 74 79  l Fts5Global;.ty
0a20: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
0a30: 35 43 6f 6c 73 65 74 20 46 74 73 35 43 6f 6c 73  5Colset Fts5Cols
0a40: 65 74 3b 0a 0a 2f 2a 20 49 66 20 61 20 4e 45 41  et;../* If a NEA
0a50: 52 28 29 20 63 6c 75 6d 70 20 6f 72 20 70 68 72  R() clump or phr
0a60: 61 73 65 20 6d 61 79 20 6f 6e 6c 79 20 6d 61 74  ase may only mat
0a70: 63 68 20 61 20 73 70 65 63 69 66 69 63 20 73 65  ch a specific se
0a80: 74 20 6f 66 20 63 6f 6c 75 6d 6e 73 2c 20 0a 2a  t of columns, .*
0a90: 2a 20 74 68 65 6e 20 61 6e 20 6f 62 6a 65 63 74  * then an object
0aa0: 20 6f 66 20 74 68 65 20 66 6f 6c 6c 6f 77 69 6e   of the followin
0ab0: 67 20 74 79 70 65 20 69 73 20 75 73 65 64 20 74  g type is used t
0ac0: 6f 20 72 65 63 6f 72 64 20 74 68 65 20 73 65 74  o record the set
0ad0: 20 6f 66 20 63 6f 6c 75 6d 6e 73 2e 0a 2a 2a 20   of columns..** 
0ae0: 45 61 63 68 20 65 6e 74 72 79 20 69 6e 20 74 68  Each entry in th
0af0: 65 20 61 69 43 6f 6c 5b 5d 20 61 72 72 61 79 20  e aiCol[] array 
0b00: 69 73 20 61 20 63 6f 6c 75 6d 6e 20 74 68 61 74  is a column that
0b10: 20 6d 61 79 20 62 65 20 6d 61 74 63 68 65 64 2e   may be matched.
0b20: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 6f 62 6a 65  .**.** This obje
0b30: 63 74 20 69 73 20 75 73 65 64 20 62 79 20 66 74  ct is used by ft
0b40: 73 35 5f 65 78 70 72 2e 63 20 61 6e 64 20 66 74  s5_expr.c and ft
0b50: 73 35 5f 69 6e 64 65 78 2e 63 2e 0a 2a 2f 0a 73  s5_index.c..*/.s
0b60: 74 72 75 63 74 20 46 74 73 35 43 6f 6c 73 65 74  truct Fts5Colset
0b70: 20 7b 0a 20 20 69 6e 74 20 6e 43 6f 6c 3b 0a 20   {.  int nCol;. 
0b80: 20 69 6e 74 20 61 69 43 6f 6c 5b 31 5d 3b 0a 7d   int aiCol[1];.}
0b90: 3b 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ;..../**********
0ba0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0be0: 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f  .** Interface to
0bf0: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 63 6f   code in fts5_co
0c00: 6e 66 69 67 2e 63 2e 20 66 74 73 35 5f 63 6f 6e  nfig.c. fts5_con
0c10: 66 69 67 2e 63 20 63 6f 6e 74 61 69 6e 73 20 63  fig.c contains c
0c20: 6f 6e 74 61 69 6e 73 20 63 6f 64 65 0a 2a 2a 20  ontains code.** 
0c30: 74 6f 20 70 61 72 73 65 20 74 68 65 20 61 72 67  to parse the arg
0c40: 75 6d 65 6e 74 73 20 70 61 73 73 65 64 20 74 6f  uments passed to
0c50: 20 74 68 65 20 43 52 45 41 54 45 20 56 49 52 54   the CREATE VIRT
0c60: 55 41 4c 20 54 41 42 4c 45 20 73 74 61 74 65 6d  UAL TABLE statem
0c70: 65 6e 74 2e 0a 2a 2f 0a 0a 74 79 70 65 64 65 66  ent..*/..typedef
0c80: 20 73 74 72 75 63 74 20 46 74 73 35 43 6f 6e 66   struct Fts5Conf
0c90: 69 67 20 46 74 73 35 43 6f 6e 66 69 67 3b 0a 0a  ig Fts5Config;..
0ca0: 2f 2a 0a 2a 2a 20 41 6e 20 69 6e 73 74 61 6e 63  /*.** An instanc
0cb0: 65 20 6f 66 20 74 68 65 20 66 6f 6c 6c 6f 77 69  e of the followi
0cc0: 6e 67 20 73 74 72 75 63 74 75 72 65 20 65 6e 63  ng structure enc
0cd0: 6f 64 65 73 20 61 6c 6c 20 69 6e 66 6f 72 6d 61  odes all informa
0ce0: 74 69 6f 6e 20 74 68 61 74 20 63 61 6e 0a 2a 2a  tion that can.**
0cf0: 20 62 65 20 67 6c 65 61 6e 65 64 20 66 72 6f 6d   be gleaned from
0d00: 20 74 68 65 20 43 52 45 41 54 45 20 56 49 52 54   the CREATE VIRT
0d10: 55 41 4c 20 54 41 42 4c 45 20 73 74 61 74 65 6d  UAL TABLE statem
0d20: 65 6e 74 2e 0a 2a 2a 0a 2a 2a 20 41 6e 64 20 61  ent..**.** And a
0d30: 6c 6c 20 69 6e 66 6f 72 6d 61 74 69 6f 6e 20 6c  ll information l
0d40: 6f 61 64 65 64 20 66 72 6f 6d 20 74 68 65 20 25  oaded from the %
0d50: 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 2e 0a 2a  _config table..*
0d60: 2a 0a 2a 2a 20 6e 41 75 74 6f 6d 65 72 67 65 3a  *.** nAutomerge:
0d70: 0a 2a 2a 20 20 20 54 68 65 20 6d 69 6e 69 6d 75  .**   The minimu
0d80: 6d 20 6e 75 6d 62 65 72 20 6f 66 20 73 65 67 6d  m number of segm
0d90: 65 6e 74 73 20 74 68 61 74 20 61 6e 20 61 75 74  ents that an aut
0da0: 6f 2d 6d 65 72 67 65 20 6f 70 65 72 61 74 69 6f  o-merge operatio
0db0: 6e 20 73 68 6f 75 6c 64 0a 2a 2a 20 20 20 61 74  n should.**   at
0dc0: 74 65 6d 70 74 20 74 6f 20 6d 65 72 67 65 20 74  tempt to merge t
0dd0: 6f 67 65 74 68 65 72 2e 20 41 20 76 61 6c 75 65  ogether. A value
0de0: 20 6f 66 20 31 20 73 65 74 73 20 74 68 65 20 6f   of 1 sets the o
0df0: 62 6a 65 63 74 20 74 6f 20 75 73 65 20 74 68 65  bject to use the
0e00: 20 0a 2a 2a 20 20 20 63 6f 6d 70 69 6c 65 20 74   .**   compile t
0e10: 69 6d 65 20 64 65 66 61 75 6c 74 2e 20 5a 65 72  ime default. Zer
0e20: 6f 20 64 69 73 61 62 6c 65 73 20 61 75 74 6f 2d  o disables auto-
0e30: 6d 65 72 67 65 20 61 6c 74 6f 67 65 74 68 65 72  merge altogether
0e40: 2e 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74  ..**.** zContent
0e50: 3a 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74  :.**.** zContent
0e60: 52 6f 77 69 64 3a 0a 2a 2a 20 20 20 54 68 65 20  Rowid:.**   The 
0e70: 76 61 6c 75 65 20 6f 66 20 74 68 65 20 63 6f 6e  value of the con
0e80: 74 65 6e 74 5f 72 6f 77 69 64 3d 20 6f 70 74 69  tent_rowid= opti
0e90: 6f 6e 2c 20 69 66 20 6f 6e 65 20 77 61 73 20 73  on, if one was s
0ea0: 70 65 63 69 66 69 65 64 2e 20 4f 72 20 0a 2a 2a  pecified. Or .**
0eb0: 20 20 20 74 68 65 20 73 74 72 69 6e 67 20 22 72     the string "r
0ec0: 6f 77 69 64 22 20 6f 74 68 65 72 77 69 73 65 2e  owid" otherwise.
0ed0: 20 54 68 69 73 20 74 65 78 74 20 69 73 20 6e 6f   This text is no
0ee0: 74 20 71 75 6f 74 65 64 20 2d 20 69 66 20 69 74  t quoted - if it
0ef0: 20 69 73 0a 2a 2a 20 20 20 75 73 65 64 20 61 73   is.**   used as
0f00: 20 70 61 72 74 20 6f 66 20 61 6e 20 53 51 4c 20   part of an SQL 
0f10: 73 74 61 74 65 6d 65 6e 74 20 69 74 20 6e 65 65  statement it nee
0f20: 64 73 20 74 6f 20 62 65 20 71 75 6f 74 65 64 20  ds to be quoted 
0f30: 61 70 70 72 6f 70 72 69 61 74 65 6c 79 2e 0a 2a  appropriately..*
0f40: 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74 45 78 70  *.** zContentExp
0f50: 72 6c 69 73 74 3a 0a 2a 2a 0a 2a 2a 20 70 7a 45  rlist:.**.** pzE
0f60: 72 72 6d 73 67 3a 0a 2a 2a 20 20 20 54 68 69 73  rrmsg:.**   This
0f70: 20 65 78 69 73 74 73 20 69 6e 20 6f 72 64 65 72   exists in order
0f80: 20 74 6f 20 61 6c 6c 6f 77 20 74 68 65 20 66 74   to allow the ft
0f90: 73 35 5f 69 6e 64 65 78 2e 63 20 6d 6f 64 75 6c  s5_index.c modul
0fa0: 65 20 74 6f 20 72 65 74 75 72 6e 20 61 20 0a 2a  e to return a .*
0fb0: 2a 20 20 20 64 65 63 65 6e 74 20 65 72 72 6f 72  *   decent error
0fc0: 20 6d 65 73 73 61 67 65 20 69 66 20 69 74 20 65   message if it e
0fd0: 6e 63 6f 75 6e 74 65 72 73 20 61 20 66 69 6c 65  ncounters a file
0fe0: 2d 66 6f 72 6d 61 74 20 76 65 72 73 69 6f 6e 20  -format version 
0ff0: 69 74 20 64 6f 65 73 0a 2a 2a 20 20 20 6e 6f 74  it does.**   not
1000: 20 75 6e 64 65 72 73 74 61 6e 64 2e 0a 2a 2a 0a   understand..**.
1010: 2a 2a 20 62 43 6f 6c 75 6d 6e 73 69 7a 65 3a 0a  ** bColumnsize:.
1020: 2a 2a 20 20 20 54 72 75 65 20 69 66 20 74 68 65  **   True if the
1030: 20 25 5f 64 6f 63 73 69 7a 65 20 74 61 62 6c 65   %_docsize table
1040: 20 69 73 20 63 72 65 61 74 65 64 2e 0a 2a 2a 0a   is created..**.
1050: 2a 2a 20 62 50 72 65 66 69 78 49 6e 64 65 78 3a  ** bPrefixIndex:
1060: 0a 2a 2a 20 20 20 54 68 69 73 20 69 73 20 6f 6e  .**   This is on
1070: 6c 79 20 75 73 65 64 20 66 6f 72 20 64 65 62 75  ly used for debu
1080: 67 67 69 6e 67 2e 20 49 66 20 73 65 74 20 74 6f  gging. If set to
1090: 20 66 61 6c 73 65 2c 20 61 6e 79 20 70 72 65 66   false, any pref
10a0: 69 78 20 69 6e 64 65 78 65 73 0a 2a 2a 20 20 20  ix indexes.**   
10b0: 61 72 65 20 69 67 6e 6f 72 65 64 2e 20 54 68 69  are ignored. Thi
10c0: 73 20 76 61 6c 75 65 20 69 73 20 63 6f 6e 66 69  s value is confi
10d0: 67 75 72 65 64 20 75 73 69 6e 67 3a 0a 2a 2a 0a  gured using:.**.
10e0: 2a 2a 20 20 20 20 20 20 20 49 4e 53 45 52 54 20  **       INSERT 
10f0: 49 4e 54 4f 20 74 62 6c 28 74 62 6c 2c 20 72 61  INTO tbl(tbl, ra
1100: 6e 6b 29 20 56 41 4c 55 45 53 28 27 70 72 65 66  nk) VALUES('pref
1110: 69 78 2d 69 6e 64 65 78 27 2c 20 24 62 50 72 65  ix-index', $bPre
1120: 66 69 78 49 6e 64 65 78 29 3b 0a 2a 2a 0a 2a 2f  fixIndex);.**.*/
1130: 0a 73 74 72 75 63 74 20 46 74 73 35 43 6f 6e 66  .struct Fts5Conf
1140: 69 67 20 7b 0a 20 20 73 71 6c 69 74 65 33 20 2a  ig {.  sqlite3 *
1150: 64 62 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  db;             
1160: 20 20 20 20 20 20 20 2f 2a 20 44 61 74 61 62 61         /* Databa
1170: 73 65 20 68 61 6e 64 6c 65 20 2a 2f 0a 20 20 63  se handle */.  c
1180: 68 61 72 20 2a 7a 44 62 3b 20 20 20 20 20 20 20  har *zDb;       
1190: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
11a0: 2a 20 44 61 74 61 62 61 73 65 20 68 6f 6c 64 69  * Database holdi
11b0: 6e 67 20 46 54 53 20 69 6e 64 65 78 20 28 65 2e  ng FTS index (e.
11c0: 67 2e 20 22 6d 61 69 6e 22 29 20 2a 2f 0a 20 20  g. "main") */.  
11d0: 63 68 61 72 20 2a 7a 4e 61 6d 65 3b 20 20 20 20  char *zName;    
11e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
11f0: 2f 2a 20 4e 61 6d 65 20 6f 66 20 46 54 53 20 69  /* Name of FTS i
1200: 6e 64 65 78 20 2a 2f 0a 20 20 69 6e 74 20 6e 43  ndex */.  int nC
1210: 6f 6c 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  ol;             
1220: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4e 75 6d            /* Num
1230: 62 65 72 20 6f 66 20 63 6f 6c 75 6d 6e 73 20 2a  ber of columns *
1240: 2f 0a 20 20 63 68 61 72 20 2a 2a 61 7a 43 6f 6c  /.  char **azCol
1250: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1260: 20 20 20 20 2f 2a 20 43 6f 6c 75 6d 6e 20 6e 61      /* Column na
1270: 6d 65 73 20 2a 2f 0a 20 20 75 38 20 2a 61 62 55  mes */.  u8 *abU
1280: 6e 69 6e 64 65 78 65 64 3b 20 20 20 20 20 20 20  nindexed;       
1290: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65           /* True
12a0: 20 66 6f 72 20 75 6e 69 6e 64 65 78 65 64 20 63   for unindexed c
12b0: 6f 6c 75 6d 6e 73 20 2a 2f 0a 20 20 69 6e 74 20  olumns */.  int 
12c0: 6e 50 72 65 66 69 78 3b 20 20 20 20 20 20 20 20  nPrefix;        
12d0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4e              /* N
12e0: 75 6d 62 65 72 20 6f 66 20 70 72 65 66 69 78 20  umber of prefix 
12f0: 69 6e 64 65 78 65 73 20 2a 2f 0a 20 20 69 6e 74  indexes */.  int
1300: 20 2a 61 50 72 65 66 69 78 3b 20 20 20 20 20 20   *aPrefix;      
1310: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1320: 53 69 7a 65 73 20 69 6e 20 62 79 74 65 73 20 6f  Sizes in bytes o
1330: 66 20 6e 50 72 65 66 69 78 20 70 72 65 66 69 78  f nPrefix prefix
1340: 20 69 6e 64 65 78 65 73 20 2a 2f 0a 20 20 69 6e   indexes */.  in
1350: 74 20 65 43 6f 6e 74 65 6e 74 3b 20 20 20 20 20  t eContent;     
1360: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1370: 20 41 6e 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54   An FTS5_CONTENT
1380: 20 76 61 6c 75 65 20 2a 2f 0a 20 20 63 68 61 72   value */.  char
1390: 20 2a 7a 43 6f 6e 74 65 6e 74 3b 20 20 20 20 20   *zContent;     
13a0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 63              /* c
13b0: 6f 6e 74 65 6e 74 20 74 61 62 6c 65 20 2a 2f 20  ontent table */ 
13c0: 0a 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74 65 6e  .  char *zConten
13d0: 74 52 6f 77 69 64 3b 20 20 20 20 20 20 20 20 20  tRowid;         
13e0: 20 20 20 2f 2a 20 22 63 6f 6e 74 65 6e 74 5f 72     /* "content_r
13f0: 6f 77 69 64 3d 22 20 6f 70 74 69 6f 6e 20 76 61  owid=" option va
1400: 6c 75 65 20 2a 2f 20 0a 20 20 69 6e 74 20 62 43  lue */ .  int bC
1410: 6f 6c 75 6d 6e 73 69 7a 65 3b 20 20 20 20 20 20  olumnsize;      
1420: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 22 63 6f            /* "co
1430: 6c 75 6d 6e 73 69 7a 65 3d 22 20 6f 70 74 69 6f  lumnsize=" optio
1440: 6e 20 76 61 6c 75 65 20 28 64 66 6c 74 3d 3d 31  n value (dflt==1
1450: 29 20 2a 2f 0a 20 20 69 6e 74 20 65 44 65 74 61  ) */.  int eDeta
1460: 69 6c 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  il;             
1470: 20 20 20 20 20 20 20 2f 2a 20 46 54 53 35 5f 44         /* FTS5_D
1480: 45 54 41 49 4c 5f 58 58 58 20 76 61 6c 75 65 20  ETAIL_XXX value 
1490: 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74  */.  char *zCont
14a0: 65 6e 74 45 78 70 72 6c 69 73 74 3b 0a 20 20 46  entExprlist;.  F
14b0: 74 73 35 54 6f 6b 65 6e 69 7a 65 72 20 2a 70 54  ts5Tokenizer *pT
14c0: 6f 6b 3b 0a 20 20 66 74 73 35 5f 74 6f 6b 65 6e  ok;.  fts5_token
14d0: 69 7a 65 72 20 2a 70 54 6f 6b 41 70 69 3b 0a 0a  izer *pTokApi;..
14e0: 20 20 2f 2a 20 56 61 6c 75 65 73 20 6c 6f 61 64    /* Values load
14f0: 65 64 20 66 72 6f 6d 20 74 68 65 20 25 5f 63 6f  ed from the %_co
1500: 6e 66 69 67 20 74 61 62 6c 65 20 2a 2f 0a 20 20  nfig table */.  
1510: 69 6e 74 20 69 43 6f 6f 6b 69 65 3b 20 20 20 20  int iCookie;    
1520: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1530: 2f 2a 20 49 6e 63 72 65 6d 65 6e 74 65 64 20 77  /* Incremented w
1540: 68 65 6e 20 25 5f 63 6f 6e 66 69 67 20 69 73 20  hen %_config is 
1550: 6d 6f 64 69 66 69 65 64 20 2a 2f 0a 20 20 69 6e  modified */.  in
1560: 74 20 70 67 73 7a 3b 20 20 20 20 20 20 20 20 20  t pgsz;         
1570: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1580: 20 41 70 70 72 6f 78 69 6d 61 74 65 20 70 61 67   Approximate pag
1590: 65 20 73 69 7a 65 20 75 73 65 64 20 69 6e 20 25  e size used in %
15a0: 5f 64 61 74 61 20 2a 2f 0a 20 20 69 6e 74 20 6e  _data */.  int n
15b0: 41 75 74 6f 6d 65 72 67 65 3b 20 20 20 20 20 20  Automerge;      
15c0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 27 61             /* 'a
15d0: 75 74 6f 6d 65 72 67 65 27 20 73 65 74 74 69 6e  utomerge' settin
15e0: 67 20 2a 2f 0a 20 20 69 6e 74 20 6e 43 72 69 73  g */.  int nCris
15f0: 69 73 4d 65 72 67 65 3b 20 20 20 20 20 20 20 20  isMerge;        
1600: 20 20 20 20 20 20 20 2f 2a 20 4d 61 78 69 6d 75         /* Maximu
1610: 6d 20 61 6c 6c 6f 77 65 64 20 73 65 67 6d 65 6e  m allowed segmen
1620: 74 73 20 70 65 72 20 6c 65 76 65 6c 20 2a 2f 0a  ts per level */.
1630: 20 20 69 6e 74 20 6e 55 73 65 72 6d 65 72 67 65    int nUsermerge
1640: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1650: 20 20 2f 2a 20 27 75 73 65 72 6d 65 72 67 65 27    /* 'usermerge'
1660: 20 73 65 74 74 69 6e 67 20 2a 2f 0a 20 20 69 6e   setting */.  in
1670: 74 20 6e 48 61 73 68 53 69 7a 65 3b 20 20 20 20  t nHashSize;    
1680: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1690: 20 42 79 74 65 73 20 6f 66 20 6d 65 6d 6f 72 79   Bytes of memory
16a0: 20 66 6f 72 20 69 6e 2d 6d 65 6d 6f 72 79 20 68   for in-memory h
16b0: 61 73 68 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a  ash */.  char *z
16c0: 52 61 6e 6b 3b 20 20 20 20 20 20 20 20 20 20 20  Rank;           
16d0: 20 20 20 20 20 20 20 20 20 2f 2a 20 4e 61 6d 65           /* Name
16e0: 20 6f 66 20 72 61 6e 6b 20 66 75 6e 63 74 69 6f   of rank functio
16f0: 6e 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 52 61  n */.  char *zRa
1700: 6e 6b 41 72 67 73 3b 20 20 20 20 20 20 20 20 20  nkArgs;         
1710: 20 20 20 20 20 20 20 2f 2a 20 41 72 67 75 6d 65         /* Argume
1720: 6e 74 73 20 74 6f 20 72 61 6e 6b 20 66 75 6e 63  nts to rank func
1730: 74 69 6f 6e 20 2a 2f 0a 0a 20 20 2f 2a 20 49 66  tion */..  /* If
1740: 20 6e 6f 6e 2d 4e 55 4c 4c 2c 20 70 6f 69 6e 74   non-NULL, point
1750: 73 20 74 6f 20 73 71 6c 69 74 65 33 5f 76 74 61  s to sqlite3_vta
1760: 62 2e 62 61 73 65 2e 7a 45 72 72 6d 73 67 2e 20  b.base.zErrmsg. 
1770: 4f 66 74 65 6e 20 4e 55 4c 4c 2e 20 2a 2f 0a 20  Often NULL. */. 
1780: 20 63 68 61 72 20 2a 2a 70 7a 45 72 72 6d 73 67   char **pzErrmsg
1790: 3b 0a 0a 23 69 66 64 65 66 20 53 51 4c 49 54 45  ;..#ifdef SQLITE
17a0: 5f 44 45 42 55 47 0a 20 20 69 6e 74 20 62 50 72  _DEBUG.  int bPr
17b0: 65 66 69 78 49 6e 64 65 78 3b 20 20 20 20 20 20  efixIndex;      
17c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65           /* True
17d0: 20 74 6f 20 75 73 65 20 70 72 65 66 69 78 2d 69   to use prefix-i
17e0: 6e 64 65 78 65 73 20 2a 2f 0a 23 65 6e 64 69 66  ndexes */.#endif
17f0: 0a 7d 3b 0a 0a 2f 2a 20 43 75 72 72 65 6e 74 20  .};../* Current 
1800: 65 78 70 65 63 74 65 64 20 76 61 6c 75 65 20 6f  expected value o
1810: 66 20 25 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65  f %_config table
1820: 20 27 76 65 72 73 69 6f 6e 27 20 66 69 65 6c 64   'version' field
1830: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
1840: 5f 43 55 52 52 45 4e 54 5f 56 45 52 53 49 4f 4e  _CURRENT_VERSION
1850: 20 34 0a 0a 23 64 65 66 69 6e 65 20 46 54 53 35   4..#define FTS5
1860: 5f 43 4f 4e 54 45 4e 54 5f 4e 4f 52 4d 41 4c 20  _CONTENT_NORMAL 
1870: 20 20 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35    0.#define FTS5
1880: 5f 43 4f 4e 54 45 4e 54 5f 4e 4f 4e 45 20 20 20  _CONTENT_NONE   
1890: 20 20 31 0a 23 64 65 66 69 6e 65 20 46 54 53 35    1.#define FTS5
18a0: 5f 43 4f 4e 54 45 4e 54 5f 45 58 54 45 52 4e 41  _CONTENT_EXTERNA
18b0: 4c 20 32 0a 0a 23 64 65 66 69 6e 65 20 46 54 53  L 2..#define FTS
18c0: 35 5f 44 45 54 41 49 4c 5f 46 55 4c 4c 20 20 20  5_DETAIL_FULL   
18d0: 20 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f   0.#define FTS5_
18e0: 44 45 54 41 49 4c 5f 4e 4f 4e 45 20 20 20 20 31  DETAIL_NONE    1
18f0: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 44 45  .#define FTS5_DE
1900: 54 41 49 4c 5f 43 4f 4c 55 4d 4e 53 20 32 0a 0a  TAIL_COLUMNS 2..
1910: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
1920: 35 43 6f 6e 66 69 67 50 61 72 73 65 28 0a 20 20  5ConfigParse(.  
1930: 20 20 46 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73    Fts5Global*, s
1940: 71 6c 69 74 65 33 2a 2c 20 69 6e 74 2c 20 63 6f  qlite3*, int, co
1950: 6e 73 74 20 63 68 61 72 20 2a 2a 2c 20 46 74 73  nst char **, Fts
1960: 35 43 6f 6e 66 69 67 2a 2a 2c 20 63 68 61 72 2a  5Config**, char*
1970: 2a 0a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65  *.);.void sqlite
1980: 33 46 74 73 35 43 6f 6e 66 69 67 46 72 65 65 28  3Fts5ConfigFree(
1990: 46 74 73 35 43 6f 6e 66 69 67 2a 29 3b 0a 0a 69  Fts5Config*);..i
19a0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 6f  nt sqlite3Fts5Co
19b0: 6e 66 69 67 44 65 63 6c 61 72 65 56 74 61 62 28  nfigDeclareVtab(
19c0: 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e  Fts5Config *pCon
19d0: 66 69 67 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  fig);..int sqlit
19e0: 65 33 46 74 73 35 54 6f 6b 65 6e 69 7a 65 28 0a  e3Fts5Tokenize(.
19f0: 20 20 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43    Fts5Config *pC
1a00: 6f 6e 66 69 67 2c 20 20 20 20 20 20 20 20 20 20  onfig,          
1a10: 20 20 2f 2a 20 46 54 53 35 20 43 6f 6e 66 69 67    /* FTS5 Config
1a20: 75 72 61 74 69 6f 6e 20 6f 62 6a 65 63 74 20 2a  uration object *
1a30: 2f 0a 20 20 69 6e 74 20 66 6c 61 67 73 2c 20 20  /.  int flags,  
1a40: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1a50: 20 20 20 20 2f 2a 20 46 54 53 35 5f 54 4f 4b 45      /* FTS5_TOKE
1a60: 4e 49 5a 45 5f 2a 20 66 6c 61 67 73 20 2a 2f 0a  NIZE_* flags */.
1a70: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54    const char *pT
1a80: 65 78 74 2c 20 69 6e 74 20 6e 54 65 78 74 2c 20  ext, int nText, 
1a90: 20 20 2f 2a 20 54 65 78 74 20 74 6f 20 74 6f 6b    /* Text to tok
1aa0: 65 6e 69 7a 65 20 2a 2f 0a 20 20 76 6f 69 64 20  enize */.  void 
1ab0: 2a 70 43 74 78 2c 20 20 20 20 20 20 20 20 20 20  *pCtx,          
1ac0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f             /* Co
1ad0: 6e 74 65 78 74 20 70 61 73 73 65 64 20 74 6f 20  ntext passed to 
1ae0: 78 54 6f 6b 65 6e 28 29 20 2a 2f 0a 20 20 69 6e  xToken() */.  in
1af0: 74 20 28 2a 78 54 6f 6b 65 6e 29 28 76 6f 69 64  t (*xToken)(void
1b00: 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68  *, int, const ch
1b10: 61 72 2a 2c 20 69 6e 74 2c 20 69 6e 74 2c 20 69  ar*, int, int, i
1b20: 6e 74 29 20 20 20 20 2f 2a 20 43 61 6c 6c 62 61  nt)    /* Callba
1b30: 63 6b 20 2a 2f 0a 29 3b 0a 0a 76 6f 69 64 20 73  ck */.);..void s
1b40: 71 6c 69 74 65 33 46 74 73 35 44 65 71 75 6f 74  qlite3Fts5Dequot
1b50: 65 28 63 68 61 72 20 2a 7a 29 3b 0a 0a 2f 2a 20  e(char *z);../* 
1b60: 4c 6f 61 64 20 74 68 65 20 63 6f 6e 74 65 6e 74  Load the content
1b70: 73 20 6f 66 20 74 68 65 20 25 5f 63 6f 6e 66 69  s of the %_confi
1b80: 67 20 74 61 62 6c 65 20 2a 2f 0a 69 6e 74 20 73  g table */.int s
1b90: 71 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67  qlite3Fts5Config
1ba0: 4c 6f 61 64 28 46 74 73 35 43 6f 6e 66 69 67 2a  Load(Fts5Config*
1bb0: 2c 20 69 6e 74 29 3b 0a 0a 2f 2a 20 53 65 74 20  , int);../* Set 
1bc0: 74 68 65 20 76 61 6c 75 65 20 6f 66 20 61 20 73  the value of a s
1bd0: 69 6e 67 6c 65 20 63 6f 6e 66 69 67 20 61 74 74  ingle config att
1be0: 72 69 62 75 74 65 20 2a 2f 0a 69 6e 74 20 73 71  ribute */.int sq
1bf0: 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67 53  lite3Fts5ConfigS
1c00: 65 74 56 61 6c 75 65 28 46 74 73 35 43 6f 6e 66  etValue(Fts5Conf
1c10: 69 67 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a  ig*, const char*
1c20: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a  , sqlite3_value*
1c30: 2c 20 69 6e 74 2a 29 3b 0a 0a 69 6e 74 20 73 71  , int*);..int sq
1c40: 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67 50  lite3Fts5ConfigP
1c50: 61 72 73 65 52 61 6e 6b 28 63 6f 6e 73 74 20 63  arseRank(const c
1c60: 68 61 72 2a 2c 20 63 68 61 72 2a 2a 2c 20 63 68  har*, char**, ch
1c70: 61 72 2a 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  ar**);../*.** En
1c80: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
1c90: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 63  o code in fts5_c
1ca0: 6f 6e 66 69 67 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a  onfig.c..*******
1cb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1ce0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cf0: 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  ***/../*********
1d00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d40: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
1d50: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 62  o code in fts5_b
1d60: 75 66 66 65 72 2e 63 2e 0a 2a 2f 0a 0a 2f 2a 0a  uffer.c..*/../*.
1d70: 2a 2a 20 42 75 66 66 65 72 20 6f 62 6a 65 63 74  ** Buffer object
1d80: 20 66 6f 72 20 74 68 65 20 69 6e 63 72 65 6d 65   for the increme
1d90: 6e 74 61 6c 20 62 75 69 6c 64 69 6e 67 20 6f 66  ntal building of
1da0: 20 73 74 72 69 6e 67 20 64 61 74 61 2e 0a 2a 2f   string data..*/
1db0: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20  .typedef struct 
1dc0: 46 74 73 35 42 75 66 66 65 72 20 46 74 73 35 42  Fts5Buffer Fts5B
1dd0: 75 66 66 65 72 3b 0a 73 74 72 75 63 74 20 46 74  uffer;.struct Ft
1de0: 73 35 42 75 66 66 65 72 20 7b 0a 20 20 75 38 20  s5Buffer {.  u8 
1df0: 2a 70 3b 0a 20 20 69 6e 74 20 6e 3b 0a 20 20 69  *p;.  int n;.  i
1e00: 6e 74 20 6e 53 70 61 63 65 3b 0a 7d 3b 0a 0a 69  nt nSpace;.};..i
1e10: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  nt sqlite3Fts5Bu
1e20: 66 66 65 72 53 69 7a 65 28 69 6e 74 2a 2c 20 46  fferSize(int*, F
1e30: 74 73 35 42 75 66 66 65 72 2a 2c 20 75 33 32 29  ts5Buffer*, u32)
1e40: 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74  ;.void sqlite3Ft
1e50: 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 56 61  s5BufferAppendVa
1e60: 72 69 6e 74 28 69 6e 74 2a 2c 20 46 74 73 35 42  rint(int*, Fts5B
1e70: 75 66 66 65 72 2a 2c 20 69 36 34 29 3b 0a 76 6f  uffer*, i64);.vo
1e80: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1e90: 66 66 65 72 41 70 70 65 6e 64 42 6c 6f 62 28 69  fferAppendBlob(i
1ea0: 6e 74 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a  nt*, Fts5Buffer*
1eb0: 2c 20 75 33 32 2c 20 63 6f 6e 73 74 20 75 38 2a  , u32, const u8*
1ec0: 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  );.void sqlite3F
1ed0: 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 53  ts5BufferAppendS
1ee0: 74 72 69 6e 67 28 69 6e 74 20 2a 2c 20 46 74 73  tring(int *, Fts
1ef0: 35 42 75 66 66 65 72 2a 2c 20 63 6f 6e 73 74 20  5Buffer*, const 
1f00: 63 68 61 72 2a 29 3b 0a 76 6f 69 64 20 73 71 6c  char*);.void sql
1f10: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 46 72  ite3Fts5BufferFr
1f20: 65 65 28 46 74 73 35 42 75 66 66 65 72 2a 29 3b  ee(Fts5Buffer*);
1f30: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
1f40: 35 42 75 66 66 65 72 5a 65 72 6f 28 46 74 73 35  5BufferZero(Fts5
1f50: 42 75 66 66 65 72 2a 29 3b 0a 76 6f 69 64 20 73  Buffer*);.void s
1f60: 71 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72  qlite3Fts5Buffer
1f70: 53 65 74 28 69 6e 74 2a 2c 20 46 74 73 35 42 75  Set(int*, Fts5Bu
1f80: 66 66 65 72 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73  ffer*, int, cons
1f90: 74 20 75 38 2a 29 3b 0a 76 6f 69 64 20 73 71 6c  t u8*);.void sql
1fa0: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
1fb0: 70 65 6e 64 50 72 69 6e 74 66 28 69 6e 74 20 2a  pendPrintf(int *
1fc0: 2c 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 63  , Fts5Buffer*, c
1fd0: 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b  har *zFmt, ...);
1fe0: 0a 0a 63 68 61 72 20 2a 73 71 6c 69 74 65 33 46  ..char *sqlite3F
1ff0: 74 73 35 4d 70 72 69 6e 74 66 28 69 6e 74 20 2a  ts5Mprintf(int *
2000: 70 52 63 2c 20 63 6f 6e 73 74 20 63 68 61 72 20  pRc, const char 
2010: 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b 0a 0a 23 64  *zFmt, ...);..#d
2020: 65 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72  efine fts5Buffer
2030: 5a 65 72 6f 28 78 29 20 20 20 20 20 20 20 20 20  Zero(x)         
2040: 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42      sqlite3Fts5B
2050: 75 66 66 65 72 5a 65 72 6f 28 78 29 0a 23 64 65  ufferZero(x).#de
2060: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 41  fine fts5BufferA
2070: 70 70 65 6e 64 56 61 72 69 6e 74 28 61 2c 62 2c  ppendVarint(a,b,
2080: 63 29 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  c) sqlite3Fts5Bu
2090: 66 66 65 72 41 70 70 65 6e 64 56 61 72 69 6e 74  fferAppendVarint
20a0: 28 61 2c 62 2c 63 29 0a 23 64 65 66 69 6e 65 20  (a,b,c).#define 
20b0: 66 74 73 35 42 75 66 66 65 72 46 72 65 65 28 61  fts5BufferFree(a
20c0: 29 20 20 20 20 20 20 20 20 20 20 20 20 20 73 71  )             sq
20d0: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 46  lite3Fts5BufferF
20e0: 72 65 65 28 61 29 0a 23 64 65 66 69 6e 65 20 66  ree(a).#define f
20f0: 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 42  ts5BufferAppendB
2100: 6c 6f 62 28 61 2c 62 2c 63 2c 64 29 20 73 71 6c  lob(a,b,c,d) sql
2110: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
2120: 70 65 6e 64 42 6c 6f 62 28 61 2c 62 2c 63 2c 64  pendBlob(a,b,c,d
2130: 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 42 75  ).#define fts5Bu
2140: 66 66 65 72 53 65 74 28 61 2c 62 2c 63 2c 64 29  fferSet(a,b,c,d)
2150: 20 20 20 20 20 20 20 20 73 71 6c 69 74 65 33 46          sqlite3F
2160: 74 73 35 42 75 66 66 65 72 53 65 74 28 61 2c 62  ts5BufferSet(a,b
2170: 2c 63 2c 64 29 0a 0a 23 64 65 66 69 6e 65 20 66  ,c,d)..#define f
2180: 74 73 35 42 75 66 66 65 72 47 72 6f 77 28 70 52  ts5BufferGrow(pR
2190: 63 2c 70 42 75 66 2c 6e 6e 29 20 28 20 5c 0a 20  c,pBuf,nn) ( \. 
21a0: 20 28 75 33 32 29 28 28 70 42 75 66 29 2d 3e 6e   (u32)((pBuf)->n
21b0: 29 20 2b 20 28 75 33 32 29 28 6e 6e 29 20 3c 3d  ) + (u32)(nn) <=
21c0: 20 28 75 33 32 29 28 28 70 42 75 66 29 2d 3e 6e   (u32)((pBuf)->n
21d0: 53 70 61 63 65 29 20 3f 20 30 20 3a 20 5c 0a 20  Space) ? 0 : \. 
21e0: 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42 75     sqlite3Fts5Bu
21f0: 66 66 65 72 53 69 7a 65 28 28 70 52 63 29 2c 28  fferSize((pRc),(
2200: 70 42 75 66 29 2c 28 6e 6e 29 2b 28 70 42 75 66  pBuf),(nn)+(pBuf
2210: 29 2d 3e 6e 29 20 5c 0a 29 0a 0a 2f 2a 20 57 72  )->n) \.)../* Wr
2220: 69 74 65 20 61 6e 64 20 64 65 63 6f 64 65 20 62  ite and decode b
2230: 69 67 2d 65 6e 64 69 61 6e 20 33 32 2d 62 69 74  ig-endian 32-bit
2240: 20 69 6e 74 65 67 65 72 20 76 61 6c 75 65 73 20   integer values 
2250: 2a 2f 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  */.void sqlite3F
2260: 74 73 35 50 75 74 33 32 28 75 38 2a 2c 20 69 6e  ts5Put32(u8*, in
2270: 74 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  t);.int sqlite3F
2280: 74 73 35 47 65 74 33 32 28 63 6f 6e 73 74 20 75  ts5Get32(const u
2290: 38 2a 29 3b 0a 0a 23 64 65 66 69 6e 65 20 46 54  8*);..#define FT
22a0: 53 35 5f 50 4f 53 32 43 4f 4c 55 4d 4e 28 69 50  S5_POS2COLUMN(iP
22b0: 6f 73 29 20 28 69 6e 74 29 28 69 50 6f 73 20 3e  os) (int)(iPos >
22c0: 3e 20 33 32 29 0a 23 64 65 66 69 6e 65 20 46 54  > 32).#define FT
22d0: 53 35 5f 50 4f 53 32 4f 46 46 53 45 54 28 69 50  S5_POS2OFFSET(iP
22e0: 6f 73 29 20 28 69 6e 74 29 28 69 50 6f 73 20 26  os) (int)(iPos &
22f0: 20 30 78 46 46 46 46 46 46 46 46 29 0a 0a 74 79   0xFFFFFFFF)..ty
2300: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
2310: 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72 20 46  5PoslistReader F
2320: 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72  ts5PoslistReader
2330: 3b 0a 73 74 72 75 63 74 20 46 74 73 35 50 6f 73  ;.struct Fts5Pos
2340: 6c 69 73 74 52 65 61 64 65 72 20 7b 0a 20 20 2f  listReader {.  /
2350: 2a 20 56 61 72 69 61 62 6c 65 73 20 75 73 65 64  * Variables used
2360: 20 6f 6e 6c 79 20 62 79 20 73 71 6c 69 74 65 33   only by sqlite3
2370: 46 74 73 35 50 6f 73 6c 69 73 74 49 74 65 72 58  Fts5PoslistIterX
2380: 58 58 28 29 20 66 75 6e 63 74 69 6f 6e 73 2e 20  XX() functions. 
2390: 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 61  */.  const u8 *a
23a0: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
23b0: 20 20 20 20 20 2f 2a 20 50 6f 73 69 74 69 6f 6e       /* Position
23c0: 20 6c 69 73 74 20 74 6f 20 69 74 65 72 61 74 65   list to iterate
23d0: 20 74 68 72 6f 75 67 68 20 2a 2f 0a 20 20 69 6e   through */.  in
23e0: 74 20 6e 3b 20 20 20 20 20 20 20 20 20 20 20 20  t n;            
23f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
2400: 20 53 69 7a 65 20 6f 66 20 62 75 66 66 65 72 20   Size of buffer 
2410: 61 74 20 61 5b 5d 20 69 6e 20 62 79 74 65 73 20  at a[] in bytes 
2420: 2a 2f 0a 20 20 69 6e 74 20 69 3b 20 20 20 20 20  */.  int i;     
2430: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2440: 20 20 20 20 20 2f 2a 20 43 75 72 72 65 6e 74 20       /* Current 
2450: 6f 66 66 73 65 74 20 69 6e 20 61 5b 5d 20 2a 2f  offset in a[] */
2460: 0a 0a 20 20 75 38 20 62 46 6c 61 67 3b 20 20 20  ..  u8 bFlag;   
2470: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2480: 20 20 20 20 2f 2a 20 46 6f 72 20 63 6c 69 65 6e      /* For clien
2490: 74 20 75 73 65 20 28 61 6e 79 20 63 75 73 74 6f  t use (any custo
24a0: 6d 20 70 75 72 70 6f 73 65 29 20 2a 2f 0a 0a 20  m purpose) */.. 
24b0: 20 2f 2a 20 4f 75 74 70 75 74 20 76 61 72 69 61   /* Output varia
24c0: 62 6c 65 73 20 2a 2f 0a 20 20 75 38 20 62 45 6f  bles */.  u8 bEo
24d0: 66 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  f;              
24e0: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 53 65 74            /* Set
24f0: 20 74 6f 20 74 72 75 65 20 61 74 20 45 4f 46 20   to true at EOF 
2500: 2a 2f 0a 20 20 69 36 34 20 69 50 6f 73 3b 20 20  */.  i64 iPos;  
2510: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2520: 20 20 20 20 20 2f 2a 20 28 69 43 6f 6c 3c 3c 33       /* (iCol<<3
2530: 32 29 20 2b 20 69 50 6f 73 20 2a 2f 0a 7d 3b 0a  2) + iPos */.};.
2540: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 50  int sqlite3Fts5P
2550: 6f 73 6c 69 73 74 52 65 61 64 65 72 49 6e 69 74  oslistReaderInit
2560: 28 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 61 2c  (.  const u8 *a,
2570: 20 69 6e 74 20 6e 2c 20 20 20 20 20 20 20 20 20   int n,         
2580: 20 20 20 20 2f 2a 20 50 6f 73 6c 69 73 74 20 62      /* Poslist b
2590: 75 66 66 65 72 20 74 6f 20 69 74 65 72 61 74 65  uffer to iterate
25a0: 20 74 68 72 6f 75 67 68 20 2a 2f 0a 20 20 46 74   through */.  Ft
25b0: 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72 20  s5PoslistReader 
25c0: 2a 70 49 74 65 72 20 20 20 20 20 20 20 20 2f 2a  *pIter        /*
25d0: 20 49 74 65 72 61 74 6f 72 20 6f 62 6a 65 63 74   Iterator object
25e0: 20 74 6f 20 69 6e 69 74 69 61 6c 69 7a 65 20 2a   to initialize *
25f0: 2f 0a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  /.);.int sqlite3
2600: 46 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65  Fts5PoslistReade
2610: 72 4e 65 78 74 28 46 74 73 35 50 6f 73 6c 69 73  rNext(Fts5Poslis
2620: 74 52 65 61 64 65 72 2a 29 3b 0a 0a 74 79 70 65  tReader*);..type
2630: 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35 50  def struct Fts5P
2640: 6f 73 6c 69 73 74 57 72 69 74 65 72 20 46 74 73  oslistWriter Fts
2650: 35 50 6f 73 6c 69 73 74 57 72 69 74 65 72 3b 0a  5PoslistWriter;.
2660: 73 74 72 75 63 74 20 46 74 73 35 50 6f 73 6c 69  struct Fts5Posli
2670: 73 74 57 72 69 74 65 72 20 7b 0a 20 20 69 36 34  stWriter {.  i64
2680: 20 69 50 72 65 76 3b 0a 7d 3b 0a 69 6e 74 20 73   iPrev;.};.int s
2690: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
26a0: 74 57 72 69 74 65 72 41 70 70 65 6e 64 28 46 74  tWriterAppend(Ft
26b0: 73 35 42 75 66 66 65 72 2a 2c 20 46 74 73 35 50  s5Buffer*, Fts5P
26c0: 6f 73 6c 69 73 74 57 72 69 74 65 72 2a 2c 20 69  oslistWriter*, i
26d0: 36 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65  64);.void sqlite
26e0: 33 46 74 73 35 50 6f 73 6c 69 73 74 53 61 66 65  3Fts5PoslistSafe
26f0: 41 70 70 65 6e 64 28 46 74 73 35 42 75 66 66 65  Append(Fts5Buffe
2700: 72 2a 2c 20 69 36 34 2a 2c 20 69 36 34 29 3b 0a  r*, i64*, i64);.
2710: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
2720: 50 6f 73 6c 69 73 74 4e 65 78 74 36 34 28 0a 20  PoslistNext64(. 
2730: 20 63 6f 6e 73 74 20 75 38 20 2a 61 2c 20 69 6e   const u8 *a, in
2740: 74 20 6e 2c 20 20 20 20 20 20 20 20 20 20 20 20  t n,            
2750: 20 2f 2a 20 42 75 66 66 65 72 20 63 6f 6e 74 61   /* Buffer conta
2760: 69 6e 69 6e 67 20 70 6f 73 6c 69 73 74 20 2a 2f  ining poslist */
2770: 0a 20 20 69 6e 74 20 2a 70 69 2c 20 20 20 20 20  .  int *pi,     
2780: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2790: 20 20 20 2f 2a 20 49 4e 2f 4f 55 54 3a 20 4f 66     /* IN/OUT: Of
27a0: 66 73 65 74 20 77 69 74 68 69 6e 20 61 5b 5d 20  fset within a[] 
27b0: 2a 2f 0a 20 20 69 36 34 20 2a 70 69 4f 66 66 20  */.  i64 *piOff 
27c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
27d0: 20 20 20 20 20 2f 2a 20 49 4e 2f 4f 55 54 3a 20       /* IN/OUT: 
27e0: 43 75 72 72 65 6e 74 20 6f 66 66 73 65 74 20 2a  Current offset *
27f0: 2f 0a 29 3b 0a 0a 2f 2a 20 4d 61 6c 6c 6f 63 20  /.);../* Malloc 
2800: 75 74 69 6c 69 74 79 20 2a 2f 0a 76 6f 69 64 20  utility */.void 
2810: 2a 73 71 6c 69 74 65 33 46 74 73 35 4d 61 6c 6c  *sqlite3Fts5Mall
2820: 6f 63 5a 65 72 6f 28 69 6e 74 20 2a 70 52 63 2c  ocZero(int *pRc,
2830: 20 69 6e 74 20 6e 42 79 74 65 29 3b 0a 63 68 61   int nByte);.cha
2840: 72 20 2a 73 71 6c 69 74 65 33 46 74 73 35 53 74  r *sqlite3Fts5St
2850: 72 6e 64 75 70 28 69 6e 74 20 2a 70 52 63 2c 20  rndup(int *pRc, 
2860: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 49 6e 2c  const char *pIn,
2870: 20 69 6e 74 20 6e 49 6e 29 3b 0a 0a 2f 2a 20 43   int nIn);../* C
2880: 68 61 72 61 63 74 65 72 20 73 65 74 20 74 65 73  haracter set tes
2890: 74 73 20 28 6c 69 6b 65 20 69 73 73 70 61 63 65  ts (like isspace
28a0: 28 29 2c 20 69 73 61 6c 70 68 61 28 29 20 65 74  (), isalpha() et
28b0: 63 2e 29 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  c.) */.int sqlit
28c0: 65 33 46 74 73 35 49 73 42 61 72 65 77 6f 72 64  e3Fts5IsBareword
28d0: 28 63 68 61 72 20 74 29 3b 0a 0a 0a 2f 2a 20 42  (char t);.../* B
28e0: 75 63 6b 65 74 20 6f 66 20 74 65 72 6d 73 20 6f  ucket of terms o
28f0: 62 6a 65 63 74 20 75 73 65 64 20 62 79 20 74 68  bject used by th
2900: 65 20 69 6e 74 65 67 72 69 74 79 2d 63 68 65 63  e integrity-chec
2910: 6b 20 69 6e 20 6f 66 66 73 65 74 73 3d 30 20 6d  k in offsets=0 m
2920: 6f 64 65 2e 20 2a 2f 0a 74 79 70 65 64 65 66 20  ode. */.typedef 
2930: 73 74 72 75 63 74 20 46 74 73 35 54 65 72 6d 73  struct Fts5Terms
2940: 65 74 20 46 74 73 35 54 65 72 6d 73 65 74 3b 0a  et Fts5Termset;.
2950: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 54  int sqlite3Fts5T
2960: 65 72 6d 73 65 74 4e 65 77 28 46 74 73 35 54 65  ermsetNew(Fts5Te
2970: 72 6d 73 65 74 2a 2a 29 3b 0a 69 6e 74 20 73 71  rmset**);.int sq
2980: 6c 69 74 65 33 46 74 73 35 54 65 72 6d 73 65 74  lite3Fts5Termset
2990: 41 64 64 28 46 74 73 35 54 65 72 6d 73 65 74 2a  Add(Fts5Termset*
29a0: 2c 20 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61  , int, const cha
29b0: 72 2a 2c 20 69 6e 74 2c 20 69 6e 74 20 2a 70 62  r*, int, int *pb
29c0: 50 72 65 73 65 6e 74 29 3b 0a 76 6f 69 64 20 73  Present);.void s
29d0: 71 6c 69 74 65 33 46 74 73 35 54 65 72 6d 73 65  qlite3Fts5Termse
29e0: 74 46 72 65 65 28 46 74 73 35 54 65 72 6d 73 65  tFree(Fts5Termse
29f0: 74 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20  t*);../*.** End 
2a00: 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f 20  of interface to 
2a10: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 62 75 66  code in fts5_buf
2a20: 66 65 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  fer.c..*********
2a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a70: 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  */../***********
2a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2aa0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2ab0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a  ***************.
2ac0: 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20  ** Interface to 
2ad0: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 69 6e 64  code in fts5_ind
2ae0: 65 78 2e 63 2e 20 66 74 73 35 5f 69 6e 64 65 78  ex.c. fts5_index
2af0: 2e 63 20 63 6f 6e 74 61 69 6e 73 20 63 6f 6e 74  .c contains cont
2b00: 61 69 6e 73 20 63 6f 64 65 0a 2a 2a 20 74 6f 20  ains code.** to 
2b10: 61 63 63 65 73 73 20 74 68 65 20 64 61 74 61 20  access the data 
2b20: 73 74 6f 72 65 64 20 69 6e 20 74 68 65 20 25 5f  stored in the %_
2b30: 64 61 74 61 20 74 61 62 6c 65 2e 0a 2a 2f 0a 0a  data table..*/..
2b40: 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46  typedef struct F
2b50: 74 73 35 49 6e 64 65 78 20 46 74 73 35 49 6e 64  ts5Index Fts5Ind
2b60: 65 78 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75  ex;.typedef stru
2b70: 63 74 20 46 74 73 35 49 6e 64 65 78 49 74 65 72  ct Fts5IndexIter
2b80: 20 46 74 73 35 49 6e 64 65 78 49 74 65 72 3b 0a   Fts5IndexIter;.
2b90: 0a 73 74 72 75 63 74 20 46 74 73 35 49 6e 64 65  .struct Fts5Inde
2ba0: 78 49 74 65 72 20 7b 0a 20 20 69 36 34 20 69 52  xIter {.  i64 iR
2bb0: 6f 77 69 64 3b 0a 20 20 63 6f 6e 73 74 20 75 38  owid;.  const u8
2bc0: 20 2a 70 44 61 74 61 3b 0a 20 20 69 6e 74 20 6e   *pData;.  int n
2bd0: 44 61 74 61 3b 0a 20 20 75 38 20 62 45 6f 66 3b  Data;.  u8 bEof;
2be0: 0a 7d 3b 0a 0a 23 64 65 66 69 6e 65 20 73 71 6c  .};..#define sql
2bf0: 69 74 65 33 46 74 73 35 49 74 65 72 45 6f 66 28  ite3Fts5IterEof(
2c00: 78 29 20 28 28 78 29 2d 3e 62 45 6f 66 29 0a 0a  x) ((x)->bEof)..
2c10: 2f 2a 0a 2a 2a 20 56 61 6c 75 65 73 20 75 73 65  /*.** Values use
2c20: 64 20 61 73 20 70 61 72 74 20 6f 66 20 74 68 65  d as part of the
2c30: 20 66 6c 61 67 73 20 61 72 67 75 6d 65 6e 74 20   flags argument 
2c40: 70 61 73 73 65 64 20 74 6f 20 49 6e 64 65 78 51  passed to IndexQ
2c50: 75 65 72 79 28 29 2e 0a 2a 2f 0a 23 64 65 66 69  uery()..*/.#defi
2c60: 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45  ne FTS5INDEX_QUE
2c70: 52 59 5f 50 52 45 46 49 58 20 20 20 20 20 30 78  RY_PREFIX     0x
2c80: 30 30 30 31 20 20 20 2f 2a 20 50 72 65 66 69 78  0001   /* Prefix
2c90: 20 71 75 65 72 79 20 2a 2f 0a 23 64 65 66 69 6e   query */.#defin
2ca0: 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45 52  e FTS5INDEX_QUER
2cb0: 59 5f 44 45 53 43 20 20 20 20 20 20 20 30 78 30  Y_DESC       0x0
2cc0: 30 30 32 20 20 20 2f 2a 20 44 6f 63 73 20 69 6e  002   /* Docs in
2cd0: 20 64 65 73 63 65 6e 64 69 6e 67 20 72 6f 77 69   descending rowi
2ce0: 64 20 6f 72 64 65 72 20 2a 2f 0a 23 64 65 66 69  d order */.#defi
2cf0: 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45  ne FTS5INDEX_QUE
2d00: 52 59 5f 54 45 53 54 5f 4e 4f 49 44 58 20 30 78  RY_TEST_NOIDX 0x
2d10: 30 30 30 34 20 20 20 2f 2a 20 44 6f 20 6e 6f 74  0004   /* Do not
2d20: 20 75 73 65 20 70 72 65 66 69 78 20 69 6e 64 65   use prefix inde
2d30: 78 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53  x */.#define FTS
2d40: 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 53 43 41  5INDEX_QUERY_SCA
2d50: 4e 20 20 20 20 20 20 20 30 78 30 30 30 38 20 20  N       0x0008  
2d60: 20 2f 2a 20 53 63 61 6e 20 71 75 65 72 79 20 28   /* Scan query (
2d70: 66 74 73 35 76 6f 63 61 62 29 20 2a 2f 0a 0a 2f  fts5vocab) */../
2d80: 2a 20 54 68 65 20 66 6f 6c 6c 6f 77 69 6e 67 20  * The following 
2d90: 61 72 65 20 75 73 65 64 20 69 6e 74 65 72 6e 61  are used interna
2da0: 6c 6c 79 20 62 79 20 74 68 65 20 66 74 73 35 5f  lly by the fts5_
2db0: 69 6e 64 65 78 2e 63 20 6d 6f 64 75 6c 65 2e 20  index.c module. 
2dc0: 54 68 65 79 20 61 72 65 0a 2a 2a 20 64 65 66 69  They are.** defi
2dd0: 6e 65 64 20 68 65 72 65 20 6f 6e 6c 79 20 74 6f  ned here only to
2de0: 20 6d 61 6b 65 20 69 74 20 65 61 73 69 65 72 20   make it easier 
2df0: 74 6f 20 61 76 6f 69 64 20 63 6c 61 73 68 65 73  to avoid clashes
2e00: 20 77 69 74 68 20 74 68 65 20 66 6c 61 67 73 0a   with the flags.
2e10: 2a 2a 20 61 62 6f 76 65 2e 20 2a 2f 0a 23 64 65  ** above. */.#de
2e20: 66 69 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51  fine FTS5INDEX_Q
2e30: 55 45 52 59 5f 53 4b 49 50 45 4d 50 54 59 20 20  UERY_SKIPEMPTY  
2e40: 30 78 30 30 31 30 0a 23 64 65 66 69 6e 65 20 46  0x0010.#define F
2e50: 54 53 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 4e  TS5INDEX_QUERY_N
2e60: 4f 4f 55 54 50 55 54 20 20 20 30 78 30 30 32 30  OOUTPUT   0x0020
2e70: 0a 0a 2f 2a 0a 2a 2a 20 43 72 65 61 74 65 2f 64  ../*.** Create/d
2e80: 65 73 74 72 6f 79 20 61 6e 20 46 74 73 35 49 6e  estroy an Fts5In
2e90: 64 65 78 20 6f 62 6a 65 63 74 2e 0a 2a 2f 0a 69  dex object..*/.i
2ea0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
2eb0: 64 65 78 4f 70 65 6e 28 46 74 73 35 43 6f 6e 66  dexOpen(Fts5Conf
2ec0: 69 67 20 2a 70 43 6f 6e 66 69 67 2c 20 69 6e 74  ig *pConfig, int
2ed0: 20 62 43 72 65 61 74 65 2c 20 46 74 73 35 49 6e   bCreate, Fts5In
2ee0: 64 65 78 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a  dex**, char**);.
2ef0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
2f00: 6e 64 65 78 43 6c 6f 73 65 28 46 74 73 35 49 6e  ndexClose(Fts5In
2f10: 64 65 78 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20  dex *p);../*.** 
2f20: 52 65 74 75 72 6e 20 61 20 73 69 6d 70 6c 65 20  Return a simple 
2f30: 63 68 65 63 6b 73 75 6d 20 76 61 6c 75 65 20 62  checksum value b
2f40: 61 73 65 64 20 6f 6e 20 74 68 65 20 61 72 67 75  ased on the argu
2f50: 6d 65 6e 74 73 2e 0a 2a 2f 0a 75 36 34 20 73 71  ments..*/.u64 sq
2f60: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 45 6e  lite3Fts5IndexEn
2f70: 74 72 79 43 6b 73 75 6d 28 0a 20 20 69 36 34 20  tryCksum(.  i64 
2f80: 69 52 6f 77 69 64 2c 20 0a 20 20 69 6e 74 20 69  iRowid, .  int i
2f90: 43 6f 6c 2c 20 0a 20 20 69 6e 74 20 69 50 6f 73  Col, .  int iPos
2fa0: 2c 20 0a 20 20 69 6e 74 20 69 49 64 78 2c 0a 20  , .  int iIdx,. 
2fb0: 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65   const char *pTe
2fc0: 72 6d 2c 0a 20 20 69 6e 74 20 6e 54 65 72 6d 0a  rm,.  int nTerm.
2fd0: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 41 72 67 75 6d 65  );../*.** Argume
2fe0: 6e 74 20 70 20 70 6f 69 6e 74 73 20 74 6f 20 61  nt p points to a
2ff0: 20 62 75 66 66 65 72 20 63 6f 6e 74 61 69 6e 69   buffer containi
3000: 6e 67 20 75 74 66 2d 38 20 74 65 78 74 20 74 68  ng utf-8 text th
3010: 61 74 20 69 73 20 6e 20 62 79 74 65 73 20 69 6e  at is n bytes in
3020: 20 0a 2a 2a 20 73 69 7a 65 2e 20 52 65 74 75 72   .** size. Retur
3030: 6e 20 74 68 65 20 6e 75 6d 62 65 72 20 6f 66 20  n the number of 
3040: 62 79 74 65 73 20 69 6e 20 74 68 65 20 6e 43 68  bytes in the nCh
3050: 61 72 20 63 68 61 72 61 63 74 65 72 20 70 72 65  ar character pre
3060: 66 69 78 20 6f 66 20 74 68 65 0a 2a 2a 20 62 75  fix of the.** bu
3070: 66 66 65 72 2c 20 6f 72 20 30 20 69 66 20 74 68  ffer, or 0 if th
3080: 65 72 65 20 61 72 65 20 6c 65 73 73 20 74 68 61  ere are less tha
3090: 6e 20 6e 43 68 61 72 20 63 68 61 72 61 63 74 65  n nChar characte
30a0: 72 73 20 69 6e 20 74 6f 74 61 6c 2e 0a 2a 2f 0a  rs in total..*/.
30b0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
30c0: 6e 64 65 78 43 68 61 72 6c 65 6e 54 6f 42 79 74  ndexCharlenToByt
30d0: 65 6c 65 6e 28 0a 20 20 63 6f 6e 73 74 20 63 68  elen(.  const ch
30e0: 61 72 20 2a 70 2c 20 0a 20 20 69 6e 74 20 6e 42  ar *p, .  int nB
30f0: 79 74 65 2c 20 0a 20 20 69 6e 74 20 6e 43 68 61  yte, .  int nCha
3100: 72 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 4f 70 65 6e  r.);../*.** Open
3110: 20 61 20 6e 65 77 20 69 74 65 72 61 74 6f 72 20   a new iterator 
3120: 74 6f 20 69 74 65 72 61 74 65 20 74 68 6f 75 67  to iterate thoug
3130: 68 20 61 6c 6c 20 72 6f 77 69 64 73 20 74 68 61  h all rowids tha
3140: 74 20 6d 61 74 63 68 20 74 68 65 20 0a 2a 2a 20  t match the .** 
3150: 73 70 65 63 69 66 69 65 64 20 74 6f 6b 65 6e 20  specified token 
3160: 6f 72 20 74 6f 6b 65 6e 20 70 72 65 66 69 78 2e  or token prefix.
3170: 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  .*/.int sqlite3F
3180: 74 73 35 49 6e 64 65 78 51 75 65 72 79 28 0a 20  ts5IndexQuery(. 
3190: 20 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 20   Fts5Index *p,  
31a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
31b0: 20 2f 2a 20 46 54 53 20 69 6e 64 65 78 20 74 6f   /* FTS index to
31c0: 20 71 75 65 72 79 20 2a 2f 0a 20 20 63 6f 6e 73   query */.  cons
31d0: 74 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e 2c 20  t char *pToken, 
31e0: 69 6e 74 20 6e 54 6f 6b 65 6e 2c 20 2f 2a 20 54  int nToken, /* T
31f0: 6f 6b 65 6e 20 28 6f 72 20 70 72 65 66 69 78 29  oken (or prefix)
3200: 20 74 6f 20 71 75 65 72 79 20 66 6f 72 20 2a 2f   to query for */
3210: 0a 20 20 69 6e 74 20 66 6c 61 67 73 2c 20 20 20  .  int flags,   
3220: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3230: 20 20 20 2f 2a 20 4d 61 73 6b 20 6f 66 20 46 54     /* Mask of FT
3240: 53 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 58 20  S5INDEX_QUERY_X 
3250: 66 6c 61 67 73 20 2a 2f 0a 20 20 46 74 73 35 43  flags */.  Fts5C
3260: 6f 6c 73 65 74 20 2a 70 43 6f 6c 73 65 74 2c 20  olset *pColset, 
3270: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4d 61             /* Ma
3280: 74 63 68 20 74 68 65 73 65 20 63 6f 6c 75 6d 6e  tch these column
3290: 73 20 6f 6e 6c 79 20 2a 2f 0a 20 20 46 74 73 35  s only */.  Fts5
32a0: 49 6e 64 65 78 49 74 65 72 20 2a 2a 70 70 49 74  IndexIter **ppIt
32b0: 65 72 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4f  er          /* O
32c0: 55 54 3a 20 4e 65 77 20 69 74 65 72 61 74 6f 72  UT: New iterator
32d0: 20 6f 62 6a 65 63 74 20 2a 2f 0a 29 3b 0a 0a 2f   object */.);../
32e0: 2a 0a 2a 2a 20 54 68 65 20 76 61 72 69 6f 75 73  *.** The various
32f0: 20 6f 70 65 72 61 74 69 6f 6e 73 20 6f 6e 20 6f   operations on o
3300: 70 65 6e 20 74 6f 6b 65 6e 20 6f 72 20 74 6f 6b  pen token or tok
3310: 65 6e 20 70 72 65 66 69 78 20 69 74 65 72 61 74  en prefix iterat
3320: 6f 72 73 20 6f 70 65 6e 65 64 0a 2a 2a 20 75 73  ors opened.** us
3330: 69 6e 67 20 73 71 6c 69 74 65 33 46 74 73 35 49  ing sqlite3Fts5I
3340: 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f 0a  ndexQuery()..*/.
3350: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
3360: 74 65 72 4e 65 78 74 28 46 74 73 35 49 6e 64 65  terNext(Fts5Inde
3370: 78 49 74 65 72 2a 29 3b 0a 69 6e 74 20 73 71 6c  xIter*);.int sql
3380: 69 74 65 33 46 74 73 35 49 74 65 72 4e 65 78 74  ite3Fts5IterNext
3390: 46 72 6f 6d 28 46 74 73 35 49 6e 64 65 78 49 74  From(Fts5IndexIt
33a0: 65 72 2a 2c 20 69 36 34 20 69 4d 61 74 63 68 29  er*, i64 iMatch)
33b0: 3b 0a 0a 2f 2a 0a 2a 2a 20 43 6c 6f 73 65 20 61  ;../*.** Close a
33c0: 6e 20 69 74 65 72 61 74 6f 72 20 6f 70 65 6e 65  n iterator opene
33d0: 64 20 62 79 20 73 71 6c 69 74 65 33 46 74 73 35  d by sqlite3Fts5
33e0: 49 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f  IndexQuery()..*/
33f0: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
3400: 35 49 74 65 72 43 6c 6f 73 65 28 46 74 73 35 49  5IterClose(Fts5I
3410: 6e 64 65 78 49 74 65 72 2a 29 3b 0a 0a 2f 2a 0a  ndexIter*);../*.
3420: 2a 2a 20 54 68 69 73 20 69 6e 74 65 72 66 61 63  ** This interfac
3430: 65 20 69 73 20 75 73 65 64 20 62 79 20 74 68 65  e is used by the
3440: 20 66 74 73 35 76 6f 63 61 62 20 6d 6f 64 75 6c   fts5vocab modul
3450: 65 2e 0a 2a 2f 0a 63 6f 6e 73 74 20 63 68 61 72  e..*/.const char
3460: 20 2a 73 71 6c 69 74 65 33 46 74 73 35 49 74 65   *sqlite3Fts5Ite
3470: 72 54 65 72 6d 28 46 74 73 35 49 6e 64 65 78 49  rTerm(Fts5IndexI
3480: 74 65 72 2a 2c 20 69 6e 74 2a 29 3b 0a 69 6e 74  ter*, int*);.int
3490: 20 73 71 6c 69 74 65 33 46 74 73 35 49 74 65 72   sqlite3Fts5Iter
34a0: 4e 65 78 74 53 63 61 6e 28 46 74 73 35 49 6e 64  NextScan(Fts5Ind
34b0: 65 78 49 74 65 72 2a 29 3b 0a 0a 0a 2f 2a 0a 2a  exIter*);.../*.*
34c0: 2a 20 49 6e 73 65 72 74 20 6f 72 20 72 65 6d 6f  * Insert or remo
34d0: 76 65 20 64 61 74 61 20 74 6f 20 6f 72 20 66 72  ve data to or fr
34e0: 6f 6d 20 74 68 65 20 69 6e 64 65 78 2e 20 45 61  om the index. Ea
34f0: 63 68 20 74 69 6d 65 20 61 20 64 6f 63 75 6d 65  ch time a docume
3500: 6e 74 20 69 73 20 0a 2a 2a 20 61 64 64 65 64 20  nt is .** added 
3510: 74 6f 20 6f 72 20 72 65 6d 6f 76 65 64 20 66 72  to or removed fr
3520: 6f 6d 20 74 68 65 20 69 6e 64 65 78 2c 20 74 68  om the index, th
3530: 69 73 20 66 75 6e 63 74 69 6f 6e 20 69 73 20 63  is function is c
3540: 61 6c 6c 65 64 20 6f 6e 65 20 6f 72 20 6d 6f 72  alled one or mor
3550: 65 0a 2a 2a 20 74 69 6d 65 73 2e 0a 2a 2a 0a 2a  e.** times..**.*
3560: 2a 20 46 6f 72 20 61 6e 20 69 6e 73 65 72 74 2c  * For an insert,
3570: 20 69 74 20 6d 75 73 74 20 62 65 20 63 61 6c 6c   it must be call
3580: 65 64 20 6f 6e 63 65 20 66 6f 72 20 65 61 63 68  ed once for each
3590: 20 74 6f 6b 65 6e 20 69 6e 20 74 68 65 20 6e 65   token in the ne
35a0: 77 20 64 6f 63 75 6d 65 6e 74 2e 0a 2a 2a 20 49  w document..** I
35b0: 66 20 74 68 65 20 6f 70 65 72 61 74 69 6f 6e 20  f the operation 
35c0: 69 73 20 61 20 64 65 6c 65 74 65 2c 20 69 74 20  is a delete, it 
35d0: 6d 75 73 74 20 62 65 20 63 61 6c 6c 65 64 20 28  must be called (
35e0: 61 74 20 6c 65 61 73 74 29 20 6f 6e 63 65 20 66  at least) once f
35f0: 6f 72 20 65 61 63 68 0a 2a 2a 20 75 6e 69 71 75  or each.** uniqu
3600: 65 20 74 6f 6b 65 6e 20 69 6e 20 74 68 65 20 64  e token in the d
3610: 6f 63 75 6d 65 6e 74 20 77 69 74 68 20 61 6e 20  ocument with an 
3620: 69 43 6f 6c 20 76 61 6c 75 65 20 6c 65 73 73 20  iCol value less 
3630: 74 68 61 6e 20 7a 65 72 6f 2e 20 54 68 65 20 69  than zero. The i
3640: 50 6f 73 0a 2a 2a 20 61 72 67 75 6d 65 6e 74 20  Pos.** argument 
3650: 69 73 20 69 67 6e 6f 72 65 64 20 66 6f 72 20 61  is ignored for a
3660: 20 64 65 6c 65 74 65 2e 0a 2a 2f 0a 69 6e 74 20   delete..*/.int 
3670: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78  sqlite3Fts5Index
3680: 57 72 69 74 65 28 0a 20 20 46 74 73 35 49 6e 64  Write(.  Fts5Ind
3690: 65 78 20 2a 70 2c 20 20 20 20 20 20 20 20 20 20  ex *p,          
36a0: 20 20 20 20 20 20 20 20 20 2f 2a 20 49 6e 64 65           /* Inde
36b0: 78 20 74 6f 20 77 72 69 74 65 20 74 6f 20 2a 2f  x to write to */
36c0: 0a 20 20 69 6e 74 20 69 43 6f 6c 2c 20 20 20 20  .  int iCol,    
36d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
36e0: 20 20 20 2f 2a 20 43 6f 6c 75 6d 6e 20 74 6f 6b     /* Column tok
36f0: 65 6e 20 61 70 70 65 61 72 73 20 69 6e 20 28 2d  en appears in (-
3700: 76 65 20 2d 3e 20 64 65 6c 65 74 65 29 20 2a 2f  ve -> delete) */
3710: 0a 20 20 69 6e 74 20 69 50 6f 73 2c 20 20 20 20  .  int iPos,    
3720: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3730: 20 20 20 2f 2a 20 50 6f 73 69 74 69 6f 6e 20 6f     /* Position o
3740: 66 20 74 6f 6b 65 6e 20 77 69 74 68 69 6e 20 63  f token within c
3750: 6f 6c 75 6d 6e 20 2a 2f 0a 20 20 63 6f 6e 73 74  olumn */.  const
3760: 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e 2c 20 69   char *pToken, i
3770: 6e 74 20 6e 54 6f 6b 65 6e 20 20 2f 2a 20 54 6f  nt nToken  /* To
3780: 6b 65 6e 20 74 6f 20 61 64 64 20 6f 72 20 72 65  ken to add or re
3790: 6d 6f 76 65 20 74 6f 20 6f 72 20 66 72 6f 6d 20  move to or from 
37a0: 69 6e 64 65 78 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a  index */.);../*.
37b0: 2a 2a 20 49 6e 64 69 63 61 74 65 20 74 68 61 74  ** Indicate that
37c0: 20 73 75 62 73 65 71 75 65 6e 74 20 63 61 6c 6c   subsequent call
37d0: 73 20 74 6f 20 73 71 6c 69 74 65 33 46 74 73 35  s to sqlite3Fts5
37e0: 49 6e 64 65 78 57 72 69 74 65 28 29 20 70 65 72  IndexWrite() per
37f0: 74 61 69 6e 20 74 6f 0a 2a 2a 20 64 6f 63 75 6d  tain to.** docum
3800: 65 6e 74 20 69 44 6f 63 69 64 2e 0a 2a 2f 0a 69  ent iDocid..*/.i
3810: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3820: 64 65 78 42 65 67 69 6e 57 72 69 74 65 28 0a 20  dexBeginWrite(. 
3830: 20 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 20   Fts5Index *p,  
3840: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3850: 20 2f 2a 20 49 6e 64 65 78 20 74 6f 20 77 72 69   /* Index to wri
3860: 74 65 20 74 6f 20 2a 2f 0a 20 20 69 6e 74 20 62  te to */.  int b
3870: 44 65 6c 65 74 65 2c 20 20 20 20 20 20 20 20 20  Delete,         
3880: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72             /* Tr
3890: 75 65 20 69 66 20 63 75 72 72 65 6e 74 20 6f 70  ue if current op
38a0: 65 72 61 74 69 6f 6e 20 69 73 20 61 20 64 65 6c  eration is a del
38b0: 65 74 65 20 2a 2f 0a 20 20 69 36 34 20 69 44 6f  ete */.  i64 iDo
38c0: 63 69 64 20 20 20 20 20 20 20 20 20 20 20 20 20  cid             
38d0: 20 20 20 20 20 20 20 20 20 2f 2a 20 44 6f 63 69           /* Doci
38e0: 64 20 74 6f 20 61 64 64 20 6f 72 20 72 65 6d 6f  d to add or remo
38f0: 76 65 20 64 61 74 61 20 66 72 6f 6d 20 2a 2f 0a  ve data from */.
3900: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 46 6c 75 73 68 20  );../*.** Flush 
3910: 61 6e 79 20 64 61 74 61 20 73 74 6f 72 65 64 20  any data stored 
3920: 69 6e 20 74 68 65 20 69 6e 2d 6d 65 6d 6f 72 79  in the in-memory
3930: 20 68 61 73 68 20 74 61 62 6c 65 73 20 74 6f 20   hash tables to 
3940: 74 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2a  the database..**
3950: 20 49 66 20 74 68 65 20 62 43 6f 6d 6d 69 74 20   If the bCommit 
3960: 66 6c 61 67 20 69 73 20 74 72 75 65 2c 20 61 6c  flag is true, al
3970: 73 6f 20 63 6c 6f 73 65 20 61 6e 79 20 6f 70 65  so close any ope
3980: 6e 20 62 6c 6f 62 20 68 61 6e 64 6c 65 73 2e 0a  n blob handles..
3990: 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  */.int sqlite3Ft
39a0: 73 35 49 6e 64 65 78 53 79 6e 63 28 46 74 73 35  s5IndexSync(Fts5
39b0: 49 6e 64 65 78 20 2a 70 2c 20 69 6e 74 20 62 43  Index *p, int bC
39c0: 6f 6d 6d 69 74 29 3b 0a 0a 2f 2a 0a 2a 2a 20 44  ommit);../*.** D
39d0: 69 73 63 61 72 64 20 61 6e 79 20 64 61 74 61 20  iscard any data 
39e0: 73 74 6f 72 65 64 20 69 6e 20 74 68 65 20 69 6e  stored in the in
39f0: 2d 6d 65 6d 6f 72 79 20 68 61 73 68 20 74 61 62  -memory hash tab
3a00: 6c 65 73 2e 20 44 6f 20 6e 6f 74 20 77 72 69 74  les. Do not writ
3a10: 65 20 69 74 0a 2a 2a 20 74 6f 20 74 68 65 20 64  e it.** to the d
3a20: 61 74 61 62 61 73 65 2e 20 41 64 64 69 74 69 6f  atabase. Additio
3a30: 6e 61 6c 6c 79 2c 20 61 73 73 75 6d 65 20 74 68  nally, assume th
3a40: 61 74 20 74 68 65 20 63 6f 6e 74 65 6e 74 73 20  at the contents 
3a50: 6f 66 20 74 68 65 20 25 5f 64 61 74 61 0a 2a 2a  of the %_data.**
3a60: 20 74 61 62 6c 65 20 6d 61 79 20 68 61 76 65 20   table may have 
3a70: 63 68 61 6e 67 65 64 20 6f 6e 20 64 69 73 6b 2e  changed on disk.
3a80: 20 53 6f 20 61 6e 79 20 69 6e 2d 6d 65 6d 6f 72   So any in-memor
3a90: 79 20 63 61 63 68 65 73 20 6f 66 20 25 5f 64 61  y caches of %_da
3aa0: 74 61 20 0a 2a 2a 20 72 65 63 6f 72 64 73 20 6d  ta .** records m
3ab0: 75 73 74 20 62 65 20 69 6e 76 61 6c 69 64 61 74  ust be invalidat
3ac0: 65 64 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  ed..*/.int sqlit
3ad0: 65 33 46 74 73 35 49 6e 64 65 78 52 6f 6c 6c 62  e3Fts5IndexRollb
3ae0: 61 63 6b 28 46 74 73 35 49 6e 64 65 78 20 2a 70  ack(Fts5Index *p
3af0: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 47 65 74 20 6f 72  );../*.** Get or
3b00: 20 73 65 74 20 74 68 65 20 22 61 76 65 72 61 67   set the "averag
3b10: 65 73 22 20 76 61 6c 75 65 73 2e 0a 2a 2f 0a 69  es" values..*/.i
3b20: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3b30: 64 65 78 47 65 74 41 76 65 72 61 67 65 73 28 46  dexGetAverages(F
3b40: 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 69 36 34  ts5Index *p, i64
3b50: 20 2a 70 6e 52 6f 77 2c 20 69 36 34 20 2a 61 6e   *pnRow, i64 *an
3b60: 53 69 7a 65 29 3b 0a 69 6e 74 20 73 71 6c 69 74  Size);.int sqlit
3b70: 65 33 46 74 73 35 49 6e 64 65 78 53 65 74 41 76  e3Fts5IndexSetAv
3b80: 65 72 61 67 65 73 28 46 74 73 35 49 6e 64 65 78  erages(Fts5Index
3b90: 20 2a 70 2c 20 63 6f 6e 73 74 20 75 38 2a 2c 20   *p, const u8*, 
3ba0: 69 6e 74 29 3b 0a 0a 2f 2a 0a 2a 2a 20 46 75 6e  int);../*.** Fun
3bb0: 63 74 69 6f 6e 73 20 63 61 6c 6c 65 64 20 62 79  ctions called by
3bc0: 20 74 68 65 20 73 74 6f 72 61 67 65 20 6d 6f 64   the storage mod
3bd0: 75 6c 65 20 61 73 20 70 61 72 74 20 6f 66 20 69  ule as part of i
3be0: 6e 74 65 67 72 69 74 79 2d 63 68 65 63 6b 2e 0a  ntegrity-check..
3bf0: 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  */.int sqlite3Ft
3c00: 73 35 49 6e 64 65 78 49 6e 74 65 67 72 69 74 79  s5IndexIntegrity
3c10: 43 68 65 63 6b 28 46 74 73 35 49 6e 64 65 78 2a  Check(Fts5Index*
3c20: 2c 20 75 36 34 20 63 6b 73 75 6d 29 3b 0a 0a 2f  , u64 cksum);../
3c30: 2a 20 0a 2a 2a 20 43 61 6c 6c 65 64 20 64 75 72  * .** Called dur
3c40: 69 6e 67 20 76 69 72 74 75 61 6c 20 6d 6f 64 75  ing virtual modu
3c50: 6c 65 20 69 6e 69 74 69 61 6c 69 7a 61 74 69 6f  le initializatio
3c60: 6e 20 74 6f 20 72 65 67 69 73 74 65 72 20 55 44  n to register UD
3c70: 46 20 0a 2a 2a 20 66 74 73 35 5f 64 65 63 6f 64  F .** fts5_decod
3c80: 65 28 29 20 77 69 74 68 20 53 51 4c 69 74 65 20  e() with SQLite 
3c90: 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  .*/.int sqlite3F
3ca0: 74 73 35 49 6e 64 65 78 49 6e 69 74 28 73 71 6c  ts5IndexInit(sql
3cb0: 69 74 65 33 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c  ite3*);..int sql
3cc0: 69 74 65 33 46 74 73 35 49 6e 64 65 78 53 65 74  ite3Fts5IndexSet
3cd0: 43 6f 6f 6b 69 65 28 46 74 73 35 49 6e 64 65 78  Cookie(Fts5Index
3ce0: 2a 2c 20 69 6e 74 29 3b 0a 0a 2f 2a 0a 2a 2a 20  *, int);../*.** 
3cf0: 52 65 74 75 72 6e 20 74 68 65 20 74 6f 74 61 6c  Return the total
3d00: 20 6e 75 6d 62 65 72 20 6f 66 20 65 6e 74 72 69   number of entri
3d10: 65 73 20 72 65 61 64 20 66 72 6f 6d 20 74 68 65  es read from the
3d20: 20 25 5f 64 61 74 61 20 74 61 62 6c 65 20 62 79   %_data table by
3d30: 20 0a 2a 2a 20 74 68 69 73 20 63 6f 6e 6e 65 63   .** this connec
3d40: 74 69 6f 6e 20 73 69 6e 63 65 20 69 74 20 77 61  tion since it wa
3d50: 73 20 63 72 65 61 74 65 64 2e 0a 2a 2f 0a 69 6e  s created..*/.in
3d60: 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64  t sqlite3Fts5Ind
3d70: 65 78 52 65 61 64 73 28 46 74 73 35 49 6e 64 65  exReads(Fts5Inde
3d80: 78 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  x *p);..int sqli
3d90: 74 65 33 46 74 73 35 49 6e 64 65 78 52 65 69 6e  te3Fts5IndexRein
3da0: 69 74 28 46 74 73 35 49 6e 64 65 78 20 2a 70 29  it(Fts5Index *p)
3db0: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
3dc0: 35 49 6e 64 65 78 4f 70 74 69 6d 69 7a 65 28 46  5IndexOptimize(F
3dd0: 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 69 6e  ts5Index *p);.in
3de0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64  t sqlite3Fts5Ind
3df0: 65 78 4d 65 72 67 65 28 46 74 73 35 49 6e 64 65  exMerge(Fts5Inde
3e00: 78 20 2a 70 2c 20 69 6e 74 20 6e 4d 65 72 67 65  x *p, int nMerge
3e10: 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  );.int sqlite3Ft
3e20: 73 35 49 6e 64 65 78 52 65 73 65 74 28 46 74 73  s5IndexReset(Fts
3e30: 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a 69 6e 74  5Index *p);..int
3e40: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3e50: 78 4c 6f 61 64 43 6f 6e 66 69 67 28 46 74 73 35  xLoadConfig(Fts5
3e60: 49 6e 64 65 78 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a  Index *p);../*.*
3e70: 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61  * End of interfa
3e80: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
3e90: 73 35 5f 69 6e 64 65 78 2e 63 2e 0a 2a 2a 2a 2a  s5_index.c..****
3ea0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3eb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ee0: 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a  ******/../******
3ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f30: 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63  ****.** Interfac
3f40: 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73  e to code in fts
3f50: 35 5f 76 61 72 69 6e 74 2e 63 2e 20 0a 2a 2f 0a  5_varint.c. .*/.
3f60: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 47  int sqlite3Fts5G
3f70: 65 74 56 61 72 69 6e 74 33 32 28 63 6f 6e 73 74  etVarint32(const
3f80: 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72 20 2a   unsigned char *
3f90: 70 2c 20 75 33 32 20 2a 76 29 3b 0a 69 6e 74 20  p, u32 *v);.int 
3fa0: 73 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61  sqlite3Fts5GetVa
3fb0: 72 69 6e 74 4c 65 6e 28 75 33 32 20 69 56 61 6c  rintLen(u32 iVal
3fc0: 29 3b 0a 75 38 20 73 71 6c 69 74 65 33 46 74 73  );.u8 sqlite3Fts
3fd0: 35 47 65 74 56 61 72 69 6e 74 28 63 6f 6e 73 74  5GetVarint(const
3fe0: 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72 2a 2c   unsigned char*,
3ff0: 20 75 36 34 2a 29 3b 0a 69 6e 74 20 73 71 6c 69   u64*);.int sqli
4000: 74 65 33 46 74 73 35 50 75 74 56 61 72 69 6e 74  te3Fts5PutVarint
4010: 28 75 6e 73 69 67 6e 65 64 20 63 68 61 72 20 2a  (unsigned char *
4020: 70 2c 20 75 36 34 20 76 29 3b 0a 0a 23 64 65 66  p, u64 v);..#def
4030: 69 6e 65 20 66 74 73 35 47 65 74 56 61 72 69 6e  ine fts5GetVarin
4040: 74 33 32 28 61 2c 62 29 20 73 71 6c 69 74 65 33  t32(a,b) sqlite3
4050: 46 74 73 35 47 65 74 56 61 72 69 6e 74 33 32 28  Fts5GetVarint32(
4060: 61 2c 28 75 33 32 2a 29 26 62 29 0a 23 64 65 66  a,(u32*)&b).#def
4070: 69 6e 65 20 66 74 73 35 47 65 74 56 61 72 69 6e  ine fts5GetVarin
4080: 74 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35  t    sqlite3Fts5
4090: 47 65 74 56 61 72 69 6e 74 0a 0a 23 64 65 66 69  GetVarint..#defi
40a0: 6e 65 20 66 74 73 35 46 61 73 74 47 65 74 56 61  ne fts5FastGetVa
40b0: 72 69 6e 74 33 32 28 61 2c 20 69 4f 66 66 2c 20  rint32(a, iOff, 
40c0: 6e 56 61 6c 29 20 7b 20 20 20 20 20 20 5c 0a 20  nVal) {      \. 
40d0: 20 6e 56 61 6c 20 3d 20 28 61 29 5b 69 4f 66 66   nVal = (a)[iOff
40e0: 2b 2b 5d 3b 20 20 20 20 20 20 20 20 20 20 20 20  ++];            
40f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4100: 20 5c 0a 20 20 69 66 28 20 6e 56 61 6c 20 26 20   \.  if( nVal & 
4110: 30 78 38 30 20 29 7b 20 20 20 20 20 20 20 20 20  0x80 ){         
4120: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4130: 20 20 20 20 20 5c 0a 20 20 20 20 69 4f 66 66 2d       \.    iOff-
4140: 2d 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  -;              
4150: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4160: 20 20 20 20 20 20 20 20 20 5c 0a 20 20 20 20 69           \.    i
4170: 4f 66 66 20 2b 3d 20 66 74 73 35 47 65 74 56 61  Off += fts5GetVa
4180: 72 69 6e 74 33 32 28 26 28 61 29 5b 69 4f 66 66  rint32(&(a)[iOff
4190: 5d 2c 20 6e 56 61 6c 29 3b 20 20 20 20 5c 0a 20  ], nVal);    \. 
41a0: 20 7d 20 20 20 20 20 20 20 20 20 20 20 20 20 20   }              
41b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
41c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
41d0: 20 5c 0a 7d 0a 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64   \.}.../*.** End
41e0: 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f   of interface to
41f0: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 76 61   code in fts5_va
4200: 72 69 6e 74 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  rint.c..********
4210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4250: 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  **/.../*********
4260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4290: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
42a0: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
42b0: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 2e 63  o code in fts5.c
42c0: 2e 20 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74  . .*/..int sqlit
42d0: 65 33 46 74 73 35 47 65 74 54 6f 6b 65 6e 69 7a  e3Fts5GetTokeniz
42e0: 65 72 28 0a 20 20 46 74 73 35 47 6c 6f 62 61 6c  er(.  Fts5Global
42f0: 2a 2c 20 0a 20 20 63 6f 6e 73 74 20 63 68 61 72  *, .  const char
4300: 20 2a 2a 61 7a 41 72 67 2c 0a 20 20 69 6e 74 20   **azArg,.  int 
4310: 6e 41 72 67 2c 0a 20 20 46 74 73 35 54 6f 6b 65  nArg,.  Fts5Toke
4320: 6e 69 7a 65 72 2a 2a 2c 0a 20 20 66 74 73 35 5f  nizer**,.  fts5_
4330: 74 6f 6b 65 6e 69 7a 65 72 2a 2a 2c 0a 20 20 63  tokenizer**,.  c
4340: 68 61 72 20 2a 2a 70 7a 45 72 72 0a 29 3b 0a 0a  har **pzErr.);..
4350: 46 74 73 35 49 6e 64 65 78 20 2a 73 71 6c 69 74  Fts5Index *sqlit
4360: 65 33 46 74 73 35 49 6e 64 65 78 46 72 6f 6d 43  e3Fts5IndexFromC
4370: 73 72 69 64 28 46 74 73 35 47 6c 6f 62 61 6c 2a  srid(Fts5Global*
4380: 2c 20 69 36 34 2c 20 46 74 73 35 43 6f 6e 66 69  , i64, Fts5Confi
4390: 67 20 2a 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  g **);../*.** En
43a0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
43b0: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 2e 63  o code in fts5.c
43c0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
43d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f  ************/../
4410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4420: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4430: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4440: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4450: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
4460: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
4470: 69 6e 20 66 74 73 35 5f 68 61 73 68 2e 63 2e 20  in fts5_hash.c. 
4480: 0a 2a 2f 0a 74 79 70 65 64 65 66 20 73 74 72 75  .*/.typedef stru
4490: 63 74 20 46 74 73 35 48 61 73 68 20 46 74 73 35  ct Fts5Hash Fts5
44a0: 48 61 73 68 3b 0a 0a 2f 2a 0a 2a 2a 20 43 72 65  Hash;../*.** Cre
44b0: 61 74 65 20 61 20 68 61 73 68 20 74 61 62 6c 65  ate a hash table
44c0: 2c 20 66 72 65 65 20 61 20 68 61 73 68 20 74 61  , free a hash ta
44d0: 62 6c 65 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69  ble..*/.int sqli
44e0: 74 65 33 46 74 73 35 48 61 73 68 4e 65 77 28 46  te3Fts5HashNew(F
44f0: 74 73 35 43 6f 6e 66 69 67 2a 2c 20 46 74 73 35  ts5Config*, Fts5
4500: 48 61 73 68 2a 2a 2c 20 69 6e 74 20 2a 70 6e 53  Hash**, int *pnS
4510: 69 7a 65 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  ize);.void sqlit
4520: 65 33 46 74 73 35 48 61 73 68 46 72 65 65 28 46  e3Fts5HashFree(F
4530: 74 73 35 48 61 73 68 2a 29 3b 0a 0a 69 6e 74 20  ts5Hash*);..int 
4540: 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 57  sqlite3Fts5HashW
4550: 72 69 74 65 28 0a 20 20 46 74 73 35 48 61 73 68  rite(.  Fts5Hash
4560: 2a 2c 0a 20 20 69 36 34 20 69 52 6f 77 69 64 2c  *,.  i64 iRowid,
4570: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4580: 20 20 20 20 20 2f 2a 20 52 6f 77 69 64 20 66 6f       /* Rowid fo
4590: 72 20 74 68 69 73 20 65 6e 74 72 79 20 2a 2f 0a  r this entry */.
45a0: 20 20 69 6e 74 20 69 43 6f 6c 2c 20 20 20 20 20    int iCol,     
45b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
45c0: 20 20 2f 2a 20 43 6f 6c 75 6d 6e 20 74 6f 6b 65    /* Column toke
45d0: 6e 20 61 70 70 65 61 72 73 20 69 6e 20 28 2d 76  n appears in (-v
45e0: 65 20 2d 3e 20 64 65 6c 65 74 65 29 20 2a 2f 0a  e -> delete) */.
45f0: 20 20 69 6e 74 20 69 50 6f 73 2c 20 20 20 20 20    int iPos,     
4600: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4610: 20 20 2f 2a 20 50 6f 73 69 74 69 6f 6e 20 6f 66    /* Position of
4620: 20 74 6f 6b 65 6e 20 77 69 74 68 69 6e 20 63 6f   token within co
4630: 6c 75 6d 6e 20 2a 2f 0a 20 20 63 68 61 72 20 62  lumn */.  char b
4640: 42 79 74 65 2c 0a 20 20 63 6f 6e 73 74 20 63 68  Byte,.  const ch
4650: 61 72 20 2a 70 54 6f 6b 65 6e 2c 20 69 6e 74 20  ar *pToken, int 
4660: 6e 54 6f 6b 65 6e 20 20 2f 2a 20 54 6f 6b 65 6e  nToken  /* Token
4670: 20 74 6f 20 61 64 64 20 6f 72 20 72 65 6d 6f 76   to add or remov
4680: 65 20 74 6f 20 6f 72 20 66 72 6f 6d 20 69 6e 64  e to or from ind
4690: 65 78 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20  ex */.);../*.** 
46a0: 45 6d 70 74 79 20 28 62 75 74 20 64 6f 20 6e 6f  Empty (but do no
46b0: 74 20 64 65 6c 65 74 65 29 20 61 20 68 61 73 68  t delete) a hash
46c0: 20 74 61 62 6c 65 2e 0a 2a 2f 0a 76 6f 69 64 20   table..*/.void 
46d0: 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68 43  sqlite3Fts5HashC
46e0: 6c 65 61 72 28 46 74 73 35 48 61 73 68 2a 29 3b  lear(Fts5Hash*);
46f0: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
4700: 35 48 61 73 68 51 75 65 72 79 28 0a 20 20 46 74  5HashQuery(.  Ft
4710: 73 35 48 61 73 68 2a 2c 20 20 20 20 20 20 20 20  s5Hash*,        
4720: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
4730: 20 48 61 73 68 20 74 61 62 6c 65 20 74 6f 20 71   Hash table to q
4740: 75 65 72 79 20 2a 2f 0a 20 20 63 6f 6e 73 74 20  uery */.  const 
4750: 63 68 61 72 20 2a 70 54 65 72 6d 2c 20 69 6e 74  char *pTerm, int
4760: 20 6e 54 65 72 6d 2c 20 20 20 2f 2a 20 51 75 65   nTerm,   /* Que
4770: 72 79 20 74 65 72 6d 20 2a 2f 0a 20 20 63 6f 6e  ry term */.  con
4780: 73 74 20 75 38 20 2a 2a 70 70 44 6f 63 6c 69 73  st u8 **ppDoclis
4790: 74 2c 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20  t,           /* 
47a0: 4f 55 54 3a 20 50 6f 69 6e 74 65 72 20 74 6f 20  OUT: Pointer to 
47b0: 64 6f 63 6c 69 73 74 20 66 6f 72 20 70 54 65 72  doclist for pTer
47c0: 6d 20 2a 2f 0a 20 20 69 6e 74 20 2a 70 6e 44 6f  m */.  int *pnDo
47d0: 63 6c 69 73 74 20 20 20 20 20 20 20 20 20 20 20  clist           
47e0: 20 20 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 53         /* OUT: S
47f0: 69 7a 65 20 6f 66 20 64 6f 63 6c 69 73 74 20 69  ize of doclist i
4800: 6e 20 62 79 74 65 73 20 2a 2f 0a 29 3b 0a 0a 69  n bytes */.);..i
4810: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 48 61  nt sqlite3Fts5Ha
4820: 73 68 53 63 61 6e 49 6e 69 74 28 0a 20 20 46 74  shScanInit(.  Ft
4830: 73 35 48 61 73 68 2a 2c 20 20 20 20 20 20 20 20  s5Hash*,        
4840: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
4850: 20 48 61 73 68 20 74 61 62 6c 65 20 74 6f 20 71   Hash table to q
4860: 75 65 72 79 20 2a 2f 0a 20 20 63 6f 6e 73 74 20  uery */.  const 
4870: 63 68 61 72 20 2a 70 54 65 72 6d 2c 20 69 6e 74  char *pTerm, int
4880: 20 6e 54 65 72 6d 20 20 20 20 2f 2a 20 51 75 65   nTerm    /* Que
4890: 72 79 20 70 72 65 66 69 78 20 2a 2f 0a 29 3b 0a  ry prefix */.);.
48a0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
48b0: 48 61 73 68 53 63 61 6e 4e 65 78 74 28 46 74 73  HashScanNext(Fts
48c0: 35 48 61 73 68 2a 29 3b 0a 69 6e 74 20 73 71 6c  5Hash*);.int sql
48d0: 69 74 65 33 46 74 73 35 48 61 73 68 53 63 61 6e  ite3Fts5HashScan
48e0: 45 6f 66 28 46 74 73 35 48 61 73 68 2a 29 3b 0a  Eof(Fts5Hash*);.
48f0: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
4900: 48 61 73 68 53 63 61 6e 45 6e 74 72 79 28 46 74  HashScanEntry(Ft
4910: 73 35 48 61 73 68 20 2a 2c 0a 20 20 63 6f 6e 73  s5Hash *,.  cons
4920: 74 20 63 68 61 72 20 2a 2a 70 7a 54 65 72 6d 2c  t char **pzTerm,
4930: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4f              /* O
4940: 55 54 3a 20 74 65 72 6d 20 28 6e 75 6c 2d 74 65  UT: term (nul-te
4950: 72 6d 69 6e 61 74 65 64 29 20 2a 2f 0a 20 20 63  rminated) */.  c
4960: 6f 6e 73 74 20 75 38 20 2a 2a 70 70 44 6f 63 6c  onst u8 **ppDocl
4970: 69 73 74 2c 20 20 20 20 20 20 20 20 20 20 20 2f  ist,           /
4980: 2a 20 4f 55 54 3a 20 70 6f 69 6e 74 65 72 20 74  * OUT: pointer t
4990: 6f 20 64 6f 63 6c 69 73 74 20 2a 2f 0a 20 20 69  o doclist */.  i
49a0: 6e 74 20 2a 70 6e 44 6f 63 6c 69 73 74 20 20 20  nt *pnDoclist   
49b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
49c0: 2a 20 4f 55 54 3a 20 73 69 7a 65 20 6f 66 20 64  * OUT: size of d
49d0: 6f 63 6c 69 73 74 20 69 6e 20 62 79 74 65 73 20  oclist in bytes 
49e0: 2a 2f 0a 29 3b 0a 0a 0a 2f 2a 0a 2a 2a 20 45 6e  */.);.../*.** En
49f0: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
4a00: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 68  o code in fts5_h
4a10: 61 73 68 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ash.c..*********
4a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a60: 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  */../***********
4a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4aa0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a  ***************.
4ab0: 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20  ** Interface to 
4ac0: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 73 74 6f  code in fts5_sto
4ad0: 72 61 67 65 2e 63 2e 20 66 74 73 35 5f 73 74 6f  rage.c. fts5_sto
4ae0: 72 61 67 65 2e 63 20 63 6f 6e 74 61 69 6e 73 20  rage.c contains 
4af0: 63 6f 6e 74 61 69 6e 73 20 0a 2a 2a 20 63 6f 64  contains .** cod
4b00: 65 20 74 6f 20 61 63 63 65 73 73 20 74 68 65 20  e to access the 
4b10: 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20 74  data stored in t
4b20: 68 65 20 25 5f 63 6f 6e 74 65 6e 74 20 61 6e 64  he %_content and
4b30: 20 25 5f 64 6f 63 73 69 7a 65 20 74 61 62 6c 65   %_docsize table
4b40: 73 2e 0a 2a 2f 0a 0a 23 64 65 66 69 6e 65 20 46  s..*/..#define F
4b50: 54 53 35 5f 53 54 4d 54 5f 53 43 41 4e 5f 41 53  TS5_STMT_SCAN_AS
4b60: 43 20 20 30 20 20 20 20 20 2f 2a 20 53 45 4c 45  C  0     /* SELE
4b70: 43 54 20 72 6f 77 69 64 2c 20 2a 20 46 52 4f 4d  CT rowid, * FROM
4b80: 20 2e 2e 2e 20 4f 52 44 45 52 20 42 59 20 31 20   ... ORDER BY 1 
4b90: 41 53 43 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46  ASC */.#define F
4ba0: 54 53 35 5f 53 54 4d 54 5f 53 43 41 4e 5f 44 45  TS5_STMT_SCAN_DE
4bb0: 53 43 20 31 20 20 20 20 20 2f 2a 20 53 45 4c 45  SC 1     /* SELE
4bc0: 43 54 20 72 6f 77 69 64 2c 20 2a 20 46 52 4f 4d  CT rowid, * FROM
4bd0: 20 2e 2e 2e 20 4f 52 44 45 52 20 42 59 20 31 20   ... ORDER BY 1 
4be0: 44 45 53 43 20 2a 2f 0a 23 64 65 66 69 6e 65 20  DESC */.#define 
4bf0: 46 54 53 35 5f 53 54 4d 54 5f 4c 4f 4f 4b 55 50  FTS5_STMT_LOOKUP
4c00: 20 20 20 20 32 20 20 20 20 20 2f 2a 20 53 45 4c      2     /* SEL
4c10: 45 43 54 20 72 6f 77 69 64 2c 20 2a 20 46 52 4f  ECT rowid, * FRO
4c20: 4d 20 2e 2e 2e 20 57 48 45 52 45 20 72 6f 77 69  M ... WHERE rowi
4c30: 64 3d 3f 20 2a 2f 0a 0a 74 79 70 65 64 65 66 20  d=? */..typedef 
4c40: 73 74 72 75 63 74 20 46 74 73 35 53 74 6f 72 61  struct Fts5Stora
4c50: 67 65 20 46 74 73 35 53 74 6f 72 61 67 65 3b 0a  ge Fts5Storage;.
4c60: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
4c70: 53 74 6f 72 61 67 65 4f 70 65 6e 28 46 74 73 35  StorageOpen(Fts5
4c80: 43 6f 6e 66 69 67 2a 2c 20 46 74 73 35 49 6e 64  Config*, Fts5Ind
4c90: 65 78 2a 2c 20 69 6e 74 2c 20 46 74 73 35 53 74  ex*, int, Fts5St
4ca0: 6f 72 61 67 65 2a 2a 2c 20 63 68 61 72 2a 2a 29  orage**, char**)
4cb0: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
4cc0: 35 53 74 6f 72 61 67 65 43 6c 6f 73 65 28 46 74  5StorageClose(Ft
4cd0: 73 35 53 74 6f 72 61 67 65 20 2a 70 29 3b 0a 69  s5Storage *p);.i
4ce0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74  nt sqlite3Fts5St
4cf0: 6f 72 61 67 65 52 65 6e 61 6d 65 28 46 74 73 35  orageRename(Fts5
4d00: 53 74 6f 72 61 67 65 2a 2c 20 63 6f 6e 73 74 20  Storage*, const 
4d10: 63 68 61 72 20 2a 7a 4e 61 6d 65 29 3b 0a 0a 69  char *zName);..i
4d20: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 44 72  nt sqlite3Fts5Dr
4d30: 6f 70 41 6c 6c 28 46 74 73 35 43 6f 6e 66 69 67  opAll(Fts5Config
4d40: 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  *);.int sqlite3F
4d50: 74 73 35 43 72 65 61 74 65 54 61 62 6c 65 28 46  ts5CreateTable(F
4d60: 74 73 35 43 6f 6e 66 69 67 2a 2c 20 63 6f 6e 73  ts5Config*, cons
4d70: 74 20 63 68 61 72 2a 2c 20 63 6f 6e 73 74 20 63  t char*, const c
4d80: 68 61 72 2a 2c 20 69 6e 74 2c 20 63 68 61 72 20  har*, int, char 
4d90: 2a 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  **);..int sqlite
4da0: 33 46 74 73 35 53 74 6f 72 61 67 65 44 65 6c 65  3Fts5StorageDele
4db0: 74 65 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  te(Fts5Storage *
4dc0: 70 2c 20 69 36 34 2c 20 73 71 6c 69 74 65 33 5f  p, i64, sqlite3_
4dd0: 76 61 6c 75 65 2a 2a 29 3b 0a 69 6e 74 20 73 71  value**);.int sq
4de0: 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67 65  lite3Fts5Storage
4df0: 43 6f 6e 74 65 6e 74 49 6e 73 65 72 74 28 46 74  ContentInsert(Ft
4e00: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 73 71  s5Storage *p, sq
4e10: 6c 69 74 65 33 5f 76 61 6c 75 65 2a 2a 2c 20 69  lite3_value**, i
4e20: 36 34 2a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  64*);.int sqlite
4e30: 33 46 74 73 35 53 74 6f 72 61 67 65 49 6e 64 65  3Fts5StorageInde
4e40: 78 49 6e 73 65 72 74 28 46 74 73 35 53 74 6f 72  xInsert(Fts5Stor
4e50: 61 67 65 20 2a 70 2c 20 73 71 6c 69 74 65 33 5f  age *p, sqlite3_
4e60: 76 61 6c 75 65 2a 2a 2c 20 69 36 34 29 3b 0a 0a  value**, i64);..
4e70: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4e80: 74 6f 72 61 67 65 49 6e 74 65 67 72 69 74 79 28  torageIntegrity(
4e90: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 29 3b  Fts5Storage *p);
4ea0: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
4eb0: 35 53 74 6f 72 61 67 65 53 74 6d 74 28 46 74 73  5StorageStmt(Fts
4ec0: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74  5Storage *p, int
4ed0: 20 65 53 74 6d 74 2c 20 73 71 6c 69 74 65 33 5f   eStmt, sqlite3_
4ee0: 73 74 6d 74 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b  stmt**, char**);
4ef0: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
4f00: 35 53 74 6f 72 61 67 65 53 74 6d 74 52 65 6c 65  5StorageStmtRele
4f10: 61 73 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ase(Fts5Storage 
4f20: 2a 70 2c 20 69 6e 74 20 65 53 74 6d 74 2c 20 73  *p, int eStmt, s
4f30: 71 6c 69 74 65 33 5f 73 74 6d 74 2a 29 3b 0a 0a  qlite3_stmt*);..
4f40: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4f50: 74 6f 72 61 67 65 44 6f 63 73 69 7a 65 28 46 74  torageDocsize(Ft
4f60: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 36  s5Storage *p, i6
4f70: 34 20 69 52 6f 77 69 64 2c 20 69 6e 74 20 2a 61  4 iRowid, int *a
4f80: 43 6f 6c 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  Col);.int sqlite
4f90: 33 46 74 73 35 53 74 6f 72 61 67 65 53 69 7a 65  3Fts5StorageSize
4fa0: 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c  (Fts5Storage *p,
4fb0: 20 69 6e 74 20 69 43 6f 6c 2c 20 69 36 34 20 2a   int iCol, i64 *
4fc0: 70 6e 41 76 67 29 3b 0a 69 6e 74 20 73 71 6c 69  pnAvg);.int sqli
4fd0: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 52 6f  te3Fts5StorageRo
4fe0: 77 43 6f 75 6e 74 28 46 74 73 35 53 74 6f 72 61  wCount(Fts5Stora
4ff0: 67 65 20 2a 70 2c 20 69 36 34 20 2a 70 6e 52 6f  ge *p, i64 *pnRo
5000: 77 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  w);..int sqlite3
5010: 46 74 73 35 53 74 6f 72 61 67 65 53 79 6e 63 28  Fts5StorageSync(
5020: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20  Fts5Storage *p, 
5030: 69 6e 74 20 62 43 6f 6d 6d 69 74 29 3b 0a 69 6e  int bCommit);.in
5040: 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f  t sqlite3Fts5Sto
5050: 72 61 67 65 52 6f 6c 6c 62 61 63 6b 28 46 74 73  rageRollback(Fts
5060: 35 53 74 6f 72 61 67 65 20 2a 70 29 3b 0a 0a 69  5Storage *p);..i
5070: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74  nt sqlite3Fts5St
5080: 6f 72 61 67 65 43 6f 6e 66 69 67 56 61 6c 75 65  orageConfigValue
5090: 28 0a 20 20 20 20 46 74 73 35 53 74 6f 72 61 67  (.    Fts5Storag
50a0: 65 20 2a 70 2c 20 63 6f 6e 73 74 20 63 68 61 72  e *p, const char
50b0: 2a 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65  *, sqlite3_value
50c0: 2a 2c 20 69 6e 74 0a 29 3b 0a 0a 69 6e 74 20 73  *, int.);..int s
50d0: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
50e0: 65 44 65 6c 65 74 65 41 6c 6c 28 46 74 73 35 53  eDeleteAll(Fts5S
50f0: 74 6f 72 61 67 65 20 2a 70 29 3b 0a 69 6e 74 20  torage *p);.int 
5100: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
5110: 67 65 52 65 62 75 69 6c 64 28 46 74 73 35 53 74  geRebuild(Fts5St
5120: 6f 72 61 67 65 20 2a 70 29 3b 0a 69 6e 74 20 73  orage *p);.int s
5130: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
5140: 65 4f 70 74 69 6d 69 7a 65 28 46 74 73 35 53 74  eOptimize(Fts5St
5150: 6f 72 61 67 65 20 2a 70 29 3b 0a 69 6e 74 20 73  orage *p);.int s
5160: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
5170: 65 4d 65 72 67 65 28 46 74 73 35 53 74 6f 72 61  eMerge(Fts5Stora
5180: 67 65 20 2a 70 2c 20 69 6e 74 20 6e 4d 65 72 67  ge *p, int nMerg
5190: 65 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  e);.int sqlite3F
51a0: 74 73 35 53 74 6f 72 61 67 65 52 65 73 65 74 28  ts5StorageReset(
51b0: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 29 3b  Fts5Storage *p);
51c0: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
51d0: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
51e0: 20 69 6e 20 66 74 73 35 5f 73 74 6f 72 61 67 65   in fts5_storage
51f0: 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  .c..************
5200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a  **************/.
5240: 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ../*************
5250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a  *************.**
5290: 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f   Interface to co
52a0: 64 65 20 69 6e 20 66 74 73 35 5f 65 78 70 72 2e  de in fts5_expr.
52b0: 63 2e 20 0a 2a 2f 0a 74 79 70 65 64 65 66 20 73  c. .*/.typedef s
52c0: 74 72 75 63 74 20 46 74 73 35 45 78 70 72 20 46  truct Fts5Expr F
52d0: 74 73 35 45 78 70 72 3b 0a 74 79 70 65 64 65 66  ts5Expr;.typedef
52e0: 20 73 74 72 75 63 74 20 46 74 73 35 45 78 70 72   struct Fts5Expr
52f0: 4e 6f 64 65 20 46 74 73 35 45 78 70 72 4e 6f 64  Node Fts5ExprNod
5300: 65 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63  e;.typedef struc
5310: 74 20 46 74 73 35 50 61 72 73 65 20 46 74 73 35  t Fts5Parse Fts5
5320: 50 61 72 73 65 3b 0a 74 79 70 65 64 65 66 20 73  Parse;.typedef s
5330: 74 72 75 63 74 20 46 74 73 35 54 6f 6b 65 6e 20  truct Fts5Token 
5340: 46 74 73 35 54 6f 6b 65 6e 3b 0a 74 79 70 65 64  Fts5Token;.typed
5350: 65 66 20 73 74 72 75 63 74 20 46 74 73 35 45 78  ef struct Fts5Ex
5360: 70 72 50 68 72 61 73 65 20 46 74 73 35 45 78 70  prPhrase Fts5Exp
5370: 72 50 68 72 61 73 65 3b 0a 74 79 70 65 64 65 66  rPhrase;.typedef
5380: 20 73 74 72 75 63 74 20 46 74 73 35 45 78 70 72   struct Fts5Expr
5390: 4e 65 61 72 73 65 74 20 46 74 73 35 45 78 70 72  Nearset Fts5Expr
53a0: 4e 65 61 72 73 65 74 3b 0a 0a 73 74 72 75 63 74  Nearset;..struct
53b0: 20 46 74 73 35 54 6f 6b 65 6e 20 7b 0a 20 20 63   Fts5Token {.  c
53c0: 6f 6e 73 74 20 63 68 61 72 20 2a 70 3b 20 20 20  onst char *p;   
53d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
53e0: 2a 20 54 6f 6b 65 6e 20 74 65 78 74 20 28 6e 6f  * Token text (no
53f0: 74 20 4e 55 4c 4c 20 74 65 72 6d 69 6e 61 74 65  t NULL terminate
5400: 64 29 20 2a 2f 0a 20 20 69 6e 74 20 6e 3b 20 20  d) */.  int n;  
5410: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
5420: 20 20 20 20 20 20 20 20 2f 2a 20 53 69 7a 65 20          /* Size 
5430: 6f 66 20 62 75 66 66 65 72 20 70 20 69 6e 20 62  of buffer p in b
5440: 79 74 65 73 20 2a 2f 0a 7d 3b 0a 0a 2f 2a 20 50  ytes */.};../* P
5450: 61 72 73 65 20 61 20 4d 41 54 43 48 20 65 78 70  arse a MATCH exp
5460: 72 65 73 73 69 6f 6e 2e 20 2a 2f 0a 69 6e 74 20  ression. */.int 
5470: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 4e  sqlite3Fts5ExprN
5480: 65 77 28 0a 20 20 46 74 73 35 43 6f 6e 66 69 67  ew(.  Fts5Config
5490: 20 2a 70 43 6f 6e 66 69 67 2c 20 0a 20 20 63 6f   *pConfig, .  co
54a0: 6e 73 74 20 63 68 61 72 20 2a 7a 45 78 70 72 2c  nst char *zExpr,
54b0: 0a 20 20 46 74 73 35 45 78 70 72 20 2a 2a 70 70  .  Fts5Expr **pp
54c0: 4e 65 77 2c 20 0a 20 20 63 68 61 72 20 2a 2a 70  New, .  char **p
54d0: 7a 45 72 72 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 66  zErr.);../*.** f
54e0: 6f 72 28 72 63 20 3d 20 73 71 6c 69 74 65 33 46  or(rc = sqlite3F
54f0: 74 73 35 45 78 70 72 46 69 72 73 74 28 70 45 78  ts5ExprFirst(pEx
5500: 70 72 2c 20 70 49 64 78 2c 20 62 44 65 73 63 29  pr, pIdx, bDesc)
5510: 3b 0a 2a 2a 20 20 20 20 20 72 63 3d 3d 53 51 4c  ;.**     rc==SQL
5520: 49 54 45 5f 4f 4b 20 26 26 20 30 3d 3d 73 71 6c  ITE_OK && 0==sql
5530: 69 74 65 33 46 74 73 35 45 78 70 72 45 6f 66 28  ite3Fts5ExprEof(
5540: 70 45 78 70 72 29 3b 0a 2a 2a 20 20 20 20 20 72  pExpr);.**     r
5550: 63 20 3d 20 73 71 6c 69 74 65 33 46 74 73 35 45  c = sqlite3Fts5E
5560: 78 70 72 4e 65 78 74 28 70 45 78 70 72 29 0a 2a  xprNext(pExpr).*
5570: 2a 20 29 7b 0a 2a 2a 20 20 20 2f 2f 20 54 68 65  * ){.**   // The
5580: 20 64 6f 63 75 6d 65 6e 74 20 77 69 74 68 20 72   document with r
5590: 6f 77 69 64 20 69 52 6f 77 69 64 20 6d 61 74 63  owid iRowid matc
55a0: 68 65 73 20 74 68 65 20 65 78 70 72 65 73 73 69  hes the expressi
55b0: 6f 6e 21 0a 2a 2a 20 20 20 69 36 34 20 69 52 6f  on!.**   i64 iRo
55c0: 77 69 64 20 3d 20 73 71 6c 69 74 65 33 46 74 73  wid = sqlite3Fts
55d0: 35 45 78 70 72 52 6f 77 69 64 28 70 45 78 70 72  5ExprRowid(pExpr
55e0: 29 3b 0a 2a 2a 20 7d 0a 2a 2f 0a 69 6e 74 20 73  );.** }.*/.int s
55f0: 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 46 69  qlite3Fts5ExprFi
5600: 72 73 74 28 46 74 73 35 45 78 70 72 2a 2c 20 46  rst(Fts5Expr*, F
5610: 74 73 35 49 6e 64 65 78 20 2a 70 49 64 78 2c 20  ts5Index *pIdx, 
5620: 69 36 34 20 69 4d 69 6e 2c 20 69 6e 74 20 62 44  i64 iMin, int bD
5630: 65 73 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65  esc);.int sqlite
5640: 33 46 74 73 35 45 78 70 72 4e 65 78 74 28 46 74  3Fts5ExprNext(Ft
5650: 73 35 45 78 70 72 2a 2c 20 69 36 34 20 69 4d 61  s5Expr*, i64 iMa
5660: 78 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  x);.int sqlite3F
5670: 74 73 35 45 78 70 72 45 6f 66 28 46 74 73 35 45  ts5ExprEof(Fts5E
5680: 78 70 72 2a 29 3b 0a 69 36 34 20 73 71 6c 69 74  xpr*);.i64 sqlit
5690: 65 33 46 74 73 35 45 78 70 72 52 6f 77 69 64 28  e3Fts5ExprRowid(
56a0: 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a 76 6f 69  Fts5Expr*);..voi
56b0: 64 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  d sqlite3Fts5Exp
56c0: 72 46 72 65 65 28 46 74 73 35 45 78 70 72 2a 29  rFree(Fts5Expr*)
56d0: 3b 0a 0a 2f 2a 20 43 61 6c 6c 65 64 20 64 75 72  ;../* Called dur
56e0: 69 6e 67 20 73 74 61 72 74 75 70 20 74 6f 20 72  ing startup to r
56f0: 65 67 69 73 74 65 72 20 61 20 55 44 46 20 77 69  egister a UDF wi
5700: 74 68 20 53 51 4c 69 74 65 20 2a 2f 0a 69 6e 74  th SQLite */.int
5710: 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72   sqlite3Fts5Expr
5720: 49 6e 69 74 28 46 74 73 35 47 6c 6f 62 61 6c 2a  Init(Fts5Global*
5730: 2c 20 73 71 6c 69 74 65 33 2a 29 3b 0a 0a 69 6e  , sqlite3*);..in
5740: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  t sqlite3Fts5Exp
5750: 72 50 68 72 61 73 65 43 6f 75 6e 74 28 46 74 73  rPhraseCount(Fts
5760: 35 45 78 70 72 2a 29 3b 0a 69 6e 74 20 73 71 6c  5Expr*);.int sql
5770: 69 74 65 33 46 74 73 35 45 78 70 72 50 68 72 61  ite3Fts5ExprPhra
5780: 73 65 53 69 7a 65 28 46 74 73 35 45 78 70 72 2a  seSize(Fts5Expr*
5790: 2c 20 69 6e 74 20 69 50 68 72 61 73 65 29 3b 0a  , int iPhrase);.
57a0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45  int sqlite3Fts5E
57b0: 78 70 72 50 6f 73 6c 69 73 74 28 46 74 73 35 45  xprPoslist(Fts5E
57c0: 78 70 72 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73 74  xpr*, int, const
57d0: 20 75 38 20 2a 2a 29 3b 0a 0a 74 79 70 65 64 65   u8 **);..typede
57e0: 66 20 73 74 72 75 63 74 20 46 74 73 35 50 6f 73  f struct Fts5Pos
57f0: 6c 69 73 74 50 6f 70 75 6c 61 74 6f 72 20 46 74  listPopulator Ft
5800: 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61 74  s5PoslistPopulat
5810: 6f 72 3b 0a 46 74 73 35 50 6f 73 6c 69 73 74 50  or;.Fts5PoslistP
5820: 6f 70 75 6c 61 74 6f 72 20 2a 73 71 6c 69 74 65  opulator *sqlite
5830: 33 46 74 73 35 45 78 70 72 43 6c 65 61 72 50 6f  3Fts5ExprClearPo
5840: 73 6c 69 73 74 73 28 46 74 73 35 45 78 70 72 2a  slists(Fts5Expr*
5850: 2c 20 69 6e 74 29 3b 0a 69 6e 74 20 73 71 6c 69  , int);.int sqli
5860: 74 65 33 46 74 73 35 45 78 70 72 50 6f 70 75 6c  te3Fts5ExprPopul
5870: 61 74 65 50 6f 73 6c 69 73 74 73 28 0a 20 20 20  atePoslists(.   
5880: 20 46 74 73 35 43 6f 6e 66 69 67 2a 2c 20 46 74   Fts5Config*, Ft
5890: 73 35 45 78 70 72 2a 2c 20 46 74 73 35 50 6f 73  s5Expr*, Fts5Pos
58a0: 6c 69 73 74 50 6f 70 75 6c 61 74 6f 72 2a 2c 20  listPopulator*, 
58b0: 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a  int, const char*
58c0: 2c 20 69 6e 74 0a 29 3b 0a 76 6f 69 64 20 73 71  , int.);.void sq
58d0: 6c 69 74 65 33 46 74 73 35 45 78 70 72 43 68 65  lite3Fts5ExprChe
58e0: 63 6b 50 6f 73 6c 69 73 74 73 28 46 74 73 35 45  ckPoslists(Fts5E
58f0: 78 70 72 2a 2c 20 69 36 34 29 3b 0a 0a 69 6e 74  xpr*, i64);..int
5900: 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72   sqlite3Fts5Expr
5910: 43 6c 6f 6e 65 50 68 72 61 73 65 28 46 74 73 35  ClonePhrase(Fts5
5920: 45 78 70 72 2a 2c 20 69 6e 74 2c 20 46 74 73 35  Expr*, int, Fts5
5930: 45 78 70 72 2a 2a 29 3b 0a 0a 69 6e 74 20 73 71  Expr**);..int sq
5940: 6c 69 74 65 33 46 74 73 35 45 78 70 72 50 68 72  lite3Fts5ExprPhr
5950: 61 73 65 43 6f 6c 6c 69 73 74 28 46 74 73 35 45  aseCollist(Fts5E
5960: 78 70 72 20 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73  xpr *, int, cons
5970: 74 20 75 38 20 2a 2a 2c 20 69 6e 74 20 2a 29 3b  t u8 **, int *);
5980: 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ../*************
5990: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
59a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a  **************.*
59b0: 2a 20 54 68 65 20 66 74 73 35 5f 65 78 70 72 2e  * The fts5_expr.
59c0: 63 20 41 50 49 20 61 62 6f 76 65 20 74 68 69 73  c API above this
59d0: 20 70 6f 69 6e 74 20 69 73 20 75 73 65 64 20 62   point is used b
59e0: 79 20 74 68 65 20 6f 74 68 65 72 20 68 61 6e 64  y the other hand
59f0: 2d 77 72 69 74 74 65 6e 0a 2a 2a 20 43 20 63 6f  -written.** C co
5a00: 64 65 20 69 6e 20 74 68 69 73 20 6d 6f 64 75 6c  de in this modul
5a10: 65 2e 20 54 68 65 20 69 6e 74 65 72 66 61 63 65  e. The interface
5a20: 73 20 62 65 6c 6f 77 20 74 68 69 73 20 70 6f 69  s below this poi
5a30: 6e 74 20 61 72 65 20 63 61 6c 6c 65 64 20 62 79  nt are called by
5a40: 0a 2a 2a 20 74 68 65 20 70 61 72 73 65 72 20 63  .** the parser c
5a50: 6f 64 65 20 69 6e 20 66 74 73 35 70 61 72 73 65  ode in fts5parse
5a60: 2e 79 2e 20 20 2a 2f 0a 0a 76 6f 69 64 20 73 71  .y.  */..void sq
5a70: 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 45 72  lite3Fts5ParseEr
5a80: 72 6f 72 28 46 74 73 35 50 61 72 73 65 20 2a 70  ror(Fts5Parse *p
5a90: 50 61 72 73 65 2c 20 63 6f 6e 73 74 20 63 68 61  Parse, const cha
5aa0: 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b 0a 0a  r *zFmt, ...);..
5ab0: 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a 73 71  Fts5ExprNode *sq
5ac0: 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 4e 6f  lite3Fts5ParseNo
5ad0: 64 65 28 0a 20 20 46 74 73 35 50 61 72 73 65 20  de(.  Fts5Parse 
5ae0: 2a 70 50 61 72 73 65 2c 0a 20 20 69 6e 74 20 65  *pParse,.  int e
5af0: 54 79 70 65 2c 0a 20 20 46 74 73 35 45 78 70 72  Type,.  Fts5Expr
5b00: 4e 6f 64 65 20 2a 70 4c 65 66 74 2c 0a 20 20 46  Node *pLeft,.  F
5b10: 74 73 35 45 78 70 72 4e 6f 64 65 20 2a 70 52 69  ts5ExprNode *pRi
5b20: 67 68 74 2c 0a 20 20 46 74 73 35 45 78 70 72 4e  ght,.  Fts5ExprN
5b30: 65 61 72 73 65 74 20 2a 70 4e 65 61 72 0a 29 3b  earset *pNear.);
5b40: 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a  ..Fts5ExprNode *
5b50: 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65  sqlite3Fts5Parse
5b60: 49 6d 70 6c 69 63 69 74 41 6e 64 28 0a 20 20 46  ImplicitAnd(.  F
5b70: 74 73 35 50 61 72 73 65 20 2a 70 50 61 72 73 65  ts5Parse *pParse
5b80: 2c 0a 20 20 46 74 73 35 45 78 70 72 4e 6f 64 65  ,.  Fts5ExprNode
5b90: 20 2a 70 4c 65 66 74 2c 0a 20 20 46 74 73 35 45   *pLeft,.  Fts5E
5ba0: 78 70 72 4e 6f 64 65 20 2a 70 52 69 67 68 74 0a  xprNode *pRight.
5bb0: 29 3b 0a 0a 46 74 73 35 45 78 70 72 50 68 72 61  );..Fts5ExprPhra
5bc0: 73 65 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50  se *sqlite3Fts5P
5bd0: 61 72 73 65 54 65 72 6d 28 0a 20 20 46 74 73 35  arseTerm(.  Fts5
5be0: 50 61 72 73 65 20 2a 70 50 61 72 73 65 2c 20 0a  Parse *pParse, .
5bf0: 20 20 46 74 73 35 45 78 70 72 50 68 72 61 73 65    Fts5ExprPhrase
5c00: 20 2a 70 50 68 72 61 73 65 2c 20 0a 20 20 46 74   *pPhrase, .  Ft
5c10: 73 35 54 6f 6b 65 6e 20 2a 70 54 6f 6b 65 6e 2c  s5Token *pToken,
5c20: 0a 20 20 69 6e 74 20 62 50 72 65 66 69 78 0a 29  .  int bPrefix.)
5c30: 3b 0a 0a 46 74 73 35 45 78 70 72 4e 65 61 72 73  ;..Fts5ExprNears
5c40: 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50  et *sqlite3Fts5P
5c50: 61 72 73 65 4e 65 61 72 73 65 74 28 0a 20 20 46  arseNearset(.  F
5c60: 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 20 46 74  ts5Parse*, .  Ft
5c70: 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a 2c 0a  s5ExprNearset*,.
5c80: 20 20 46 74 73 35 45 78 70 72 50 68 72 61 73 65    Fts5ExprPhrase
5c90: 2a 20 0a 29 3b 0a 0a 46 74 73 35 43 6f 6c 73 65  * .);..Fts5Colse
5ca0: 74 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61  t *sqlite3Fts5Pa
5cb0: 72 73 65 43 6f 6c 73 65 74 28 0a 20 20 46 74 73  rseColset(.  Fts
5cc0: 35 50 61 72 73 65 2a 2c 20 0a 20 20 46 74 73 35  5Parse*, .  Fts5
5cd0: 43 6f 6c 73 65 74 2a 2c 20 0a 20 20 46 74 73 35  Colset*, .  Fts5
5ce0: 54 6f 6b 65 6e 20 2a 0a 29 3b 0a 0a 76 6f 69 64  Token *.);..void
5cf0: 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73   sqlite3Fts5Pars
5d00: 65 50 68 72 61 73 65 46 72 65 65 28 46 74 73 35  ePhraseFree(Fts5
5d10: 45 78 70 72 50 68 72 61 73 65 2a 29 3b 0a 76 6f  ExprPhrase*);.vo
5d20: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61  id sqlite3Fts5Pa
5d30: 72 73 65 4e 65 61 72 73 65 74 46 72 65 65 28 46  rseNearsetFree(F
5d40: 74 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a 29  ts5ExprNearset*)
5d50: 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74  ;.void sqlite3Ft
5d60: 73 35 50 61 72 73 65 4e 6f 64 65 46 72 65 65 28  s5ParseNodeFree(
5d70: 46 74 73 35 45 78 70 72 4e 6f 64 65 2a 29 3b 0a  Fts5ExprNode*);.
5d80: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
5d90: 35 50 61 72 73 65 53 65 74 44 69 73 74 61 6e 63  5ParseSetDistanc
5da0: 65 28 46 74 73 35 50 61 72 73 65 2a 2c 20 46 74  e(Fts5Parse*, Ft
5db0: 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a 2c 20  s5ExprNearset*, 
5dc0: 46 74 73 35 54 6f 6b 65 6e 2a 29 3b 0a 76 6f 69  Fts5Token*);.voi
5dd0: 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 72  d sqlite3Fts5Par
5de0: 73 65 53 65 74 43 6f 6c 73 65 74 28 46 74 73 35  seSetColset(Fts5
5df0: 50 61 72 73 65 2a 2c 20 46 74 73 35 45 78 70 72  Parse*, Fts5Expr
5e00: 4e 65 61 72 73 65 74 2a 2c 20 46 74 73 35 43 6f  Nearset*, Fts5Co
5e10: 6c 73 65 74 2a 29 3b 0a 46 74 73 35 43 6f 6c 73  lset*);.Fts5Cols
5e20: 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50  et *sqlite3Fts5P
5e30: 61 72 73 65 43 6f 6c 73 65 74 49 6e 76 65 72 74  arseColsetInvert
5e40: 28 46 74 73 35 50 61 72 73 65 2a 2c 20 46 74 73  (Fts5Parse*, Fts
5e50: 35 43 6f 6c 73 65 74 2a 29 3b 0a 76 6f 69 64 20  5Colset*);.void 
5e60: 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65  sqlite3Fts5Parse
5e70: 46 69 6e 69 73 68 65 64 28 46 74 73 35 50 61 72  Finished(Fts5Par
5e80: 73 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35  se *pParse, Fts5
5e90: 45 78 70 72 4e 6f 64 65 20 2a 70 29 3b 0a 76 6f  ExprNode *p);.vo
5ea0: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61  id sqlite3Fts5Pa
5eb0: 72 73 65 4e 65 61 72 28 46 74 73 35 50 61 72 73  rseNear(Fts5Pars
5ec0: 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 54  e *pParse, Fts5T
5ed0: 6f 6b 65 6e 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45  oken*);../*.** E
5ee0: 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20  nd of interface 
5ef0: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  to code in fts5_
5f00: 65 78 70 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  expr.c..********
5f10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f50: 2a 2a 2f 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a  **/..../********
5f60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fa0: 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20  **.** Interface 
5fb0: 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f  to code in fts5_
5fc0: 61 75 78 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74 20  aux.c. .*/..int 
5fd0: 73 71 6c 69 74 65 33 46 74 73 35 41 75 78 49 6e  sqlite3Fts5AuxIn
5fe0: 69 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f  it(fts5_api*);./
5ff0: 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65  *.** End of inte
6000: 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e  rface to code in
6010: 20 66 74 73 35 5f 61 75 78 2e 63 2e 0a 2a 2a 2a   fts5_aux.c..***
6020: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6030: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6040: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6050: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6060: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
6070: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6080: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6090: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60b0: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
60c0: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
60d0: 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 2e 20  s5_tokenizer.c. 
60e0: 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .*/..int sqlite3
60f0: 46 74 73 35 54 6f 6b 65 6e 69 7a 65 72 49 6e 69  Fts5TokenizerIni
6100: 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f 2a  t(fts5_api*);./*
6110: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
6120: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
6130: 66 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63  fts5_tokenizer.c
6140: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
6150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6170: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6180: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f  ************/../
6190: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
61e0: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
61f0: 69 6e 20 66 74 73 35 5f 76 6f 63 61 62 2e 63 2e  in fts5_vocab.c.
6200: 20 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65   .*/..int sqlite
6210: 33 46 74 73 35 56 6f 63 61 62 49 6e 69 74 28 46  3Fts5VocabInit(F
6220: 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69  ts5Global*, sqli
6230: 74 65 33 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  te3*);../*.** En
6240: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
6250: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 76  o code in fts5_v
6260: 6f 63 61 62 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  ocab.c..********
6270: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6280: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6290: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62b0: 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  **/.../*********
62c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6300: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
6310: 6f 20 61 75 74 6f 6d 61 74 69 63 61 6c 6c 79 20  o automatically 
6320: 67 65 6e 65 72 61 74 65 64 20 63 6f 64 65 20 69  generated code i
6330: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e  n fts5_unicode2.
6340: 63 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  c. .*/.int sqlit
6350: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 49 73 61  e3Fts5UnicodeIsa
6360: 6c 6e 75 6d 28 69 6e 74 20 63 29 3b 0a 69 6e 74  lnum(int c);.int
6370: 20 73 71 6c 69 74 65 33 46 74 73 35 55 6e 69 63   sqlite3Fts5Unic
6380: 6f 64 65 49 73 64 69 61 63 72 69 74 69 63 28 69  odeIsdiacritic(i
6390: 6e 74 20 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74  nt c);.int sqlit
63a0: 65 33 46 74 73 35 55 6e 69 63 6f 64 65 46 6f 6c  e3Fts5UnicodeFol
63b0: 64 28 69 6e 74 20 63 2c 20 69 6e 74 20 62 52 65  d(int c, int bRe
63c0: 6d 6f 76 65 44 69 61 63 72 69 74 69 63 29 3b 0a  moveDiacritic);.
63d0: 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74  /*.** End of int
63e0: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69  erface to code i
63f0: 6e 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e  n fts5_unicode2.
6400: 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  c..*************
6410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6420: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6430: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6440: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a  *************/..
6450: 23 65 6e 64 69 66 0a                             #endif.