/ Hex Artifact Content
Login

Artifact c551043de056b0b1582a54e878991f57bad074bc:


0000: 23 20 32 30 31 33 20 41 70 72 69 6c 20 32 32 0a  # 2013 April 22.
0010: 23 0a 23 20 54 68 65 20 61 75 74 68 6f 72 20 64  #.# The author d
0020: 69 73 63 6c 61 69 6d 73 20 63 6f 70 79 72 69 67  isclaims copyrig
0030: 68 74 20 74 6f 20 74 68 69 73 20 73 6f 75 72 63  ht to this sourc
0040: 65 20 63 6f 64 65 2e 20 20 49 6e 20 70 6c 61 63  e code.  In plac
0050: 65 20 6f 66 0a 23 20 61 20 6c 65 67 61 6c 20 6e  e of.# a legal n
0060: 6f 74 69 63 65 2c 20 68 65 72 65 20 69 73 20 61  otice, here is a
0070: 20 62 6c 65 73 73 69 6e 67 3a 0a 23 0a 23 20 20   blessing:.#.#  
0080: 20 20 4d 61 79 20 79 6f 75 20 64 6f 20 67 6f 6f    May you do goo
0090: 64 20 61 6e 64 20 6e 6f 74 20 65 76 69 6c 2e 0a  d and not evil..
00a0: 23 20 20 20 20 4d 61 79 20 79 6f 75 20 66 69 6e  #    May you fin
00b0: 64 20 66 6f 72 67 69 76 65 6e 65 73 73 20 66 6f  d forgiveness fo
00c0: 72 20 79 6f 75 72 73 65 6c 66 20 61 6e 64 20 66  r yourself and f
00d0: 6f 72 67 69 76 65 20 6f 74 68 65 72 73 2e 0a 23  orgive others..#
00e0: 20 20 20 20 4d 61 79 20 79 6f 75 20 73 68 61 72      May you shar
00f0: 65 20 66 72 65 65 6c 79 2c 20 6e 65 76 65 72 20  e freely, never 
0100: 74 61 6b 69 6e 67 20 6d 6f 72 65 20 74 68 61 6e  taking more than
0110: 20 79 6f 75 20 67 69 76 65 2e 0a 23 0a 23 2a 2a   you give..#.#**
0120: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0160: 2a 2a 2a 2a 2a 2a 2a 0a 23 20 54 68 69 73 20 66  *******.# This f
0170: 69 6c 65 20 69 6d 70 6c 65 6d 65 6e 74 73 20 72  ile implements r
0180: 65 67 72 65 73 73 69 6f 6e 20 74 65 73 74 73 20  egression tests 
0190: 66 6f 72 20 53 51 4c 69 74 65 20 6c 69 62 72 61  for SQLite libra
01a0: 72 79 2e 20 20 54 68 65 0a 23 20 66 6f 63 75 73  ry.  The.# focus
01b0: 20 6f 66 20 74 68 69 73 20 73 63 72 69 70 74 20   of this script 
01c0: 69 73 20 74 65 73 74 69 6e 67 20 74 68 65 20 22  is testing the "
01d0: 66 74 73 33 74 6f 6b 65 6e 69 7a 65 22 20 76 69  fts3tokenize" vi
01e0: 72 74 75 61 6c 20 74 61 62 6c 65 0a 23 20 74 68  rtual table.# th
01f0: 61 74 20 69 73 20 70 61 72 74 20 6f 66 20 74 68  at is part of th
0200: 65 20 46 54 53 33 20 6d 6f 64 75 6c 65 2e 0a 23  e FTS3 module..#
0210: 0a 0a 73 65 74 20 74 65 73 74 64 69 72 20 5b 66  ..set testdir [f
0220: 69 6c 65 20 64 69 72 6e 61 6d 65 20 24 61 72 67  ile dirname $arg
0230: 76 30 5d 0a 73 6f 75 72 63 65 20 24 74 65 73 74  v0].source $test
0240: 64 69 72 2f 74 65 73 74 65 72 2e 74 63 6c 0a 69  dir/tester.tcl.i
0250: 66 63 61 70 61 62 6c 65 20 21 66 74 73 33 20 7b  fcapable !fts3 {
0260: 20 66 69 6e 69 73 68 5f 74 65 73 74 20 3b 20 72   finish_test ; r
0270: 65 74 75 72 6e 20 7d 0a 73 65 74 20 3a 3a 74 65  eturn }.set ::te
0280: 73 74 70 72 65 66 69 78 20 66 74 73 33 74 6f 6b  stprefix fts3tok
0290: 31 0a 0a 23 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  1..#------------
02a0: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
02b0: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
02c0: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
02d0: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 0a 23 20  -------------.# 
02e0: 53 69 6d 70 6c 65 20 74 65 73 74 20 63 61 73 65  Simple test case
02f0: 73 2e 20 55 73 69 6e 67 20 74 68 65 20 64 65 66  s. Using the def
0300: 61 75 6c 74 20 28 73 69 6d 70 6c 65 29 20 74 6f  ault (simple) to
0310: 6b 65 6e 69 7a 65 72 2e 0a 23 0a 64 6f 5f 65 78  kenizer..#.do_ex
0320: 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 30 20 7b  ecsql_test 1.0 {
0330: 0a 20 20 43 52 45 41 54 45 20 56 49 52 54 55 41  .  CREATE VIRTUA
0340: 4c 20 54 41 42 4c 45 20 74 31 20 55 53 49 4e 47  L TABLE t1 USING
0350: 20 66 74 73 33 74 6f 6b 65 6e 69 7a 65 28 73 69   fts3tokenize(si
0360: 6d 70 6c 65 29 3b 0a 20 20 43 52 45 41 54 45 20  mple);.  CREATE 
0370: 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20 74 32  VIRTUAL TABLE t2
0380: 20 55 53 49 4e 47 20 66 74 73 33 74 6f 6b 65 6e   USING fts3token
0390: 69 7a 65 28 29 3b 0a 20 20 43 52 45 41 54 45 20  ize();.  CREATE 
03a0: 56 49 52 54 55 41 4c 20 54 41 42 4c 45 20 74 33  VIRTUAL TABLE t3
03b0: 20 55 53 49 4e 47 20 66 74 73 33 74 6f 6b 65 6e   USING fts3token
03c0: 69 7a 65 28 73 69 6d 70 6c 65 2c 20 27 27 2c 20  ize(simple, '', 
03d0: 27 78 79 7a 20 27 29 3b 0a 7d 0a 0a 66 6f 72 65  'xyz ');.}..fore
03e0: 61 63 68 20 7b 74 6e 20 74 62 6c 7d 20 7b 31 20  ach {tn tbl} {1 
03f0: 74 31 20 32 20 74 32 20 33 20 74 33 7d 20 7b 0a  t1 2 t2 3 t3} {.
0400: 20 20 64 6f 5f 65 78 65 63 73 71 6c 5f 74 65 73    do_execsql_tes
0410: 74 20 31 2e 24 74 6e 2e 31 20 22 53 45 4c 45 43  t 1.$tn.1 "SELEC
0420: 54 20 2a 20 46 52 4f 4d 20 24 74 62 6c 20 57 48  T * FROM $tbl WH
0430: 45 52 45 20 69 6e 70 75 74 20 3d 20 27 6f 6e 65  ERE input = 'one
0440: 20 74 77 6f 20 74 68 72 65 65 27 22 20 7b 0a 20   two three'" {. 
0450: 20 20 20 7b 6f 6e 65 20 74 77 6f 20 74 68 72 65     {one two thre
0460: 65 7d 20 6f 6e 65 20 20 20 30 20 20 33 20 30 20  e} one   0  3 0 
0470: 0a 20 20 20 20 7b 6f 6e 65 20 74 77 6f 20 74 68  .    {one two th
0480: 72 65 65 7d 20 74 77 6f 20 20 20 34 20 20 37 20  ree} two   4  7 
0490: 31 20 0a 20 20 20 20 7b 6f 6e 65 20 74 77 6f 20  1 .    {one two 
04a0: 74 68 72 65 65 7d 20 74 68 72 65 65 20 38 20 31  three} three 8 1
04b0: 33 20 32 0a 20 20 7d 0a 0a 20 20 64 6f 5f 65 78  3 2.  }..  do_ex
04c0: 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 24 74 6e  ecsql_test 1.$tn
04d0: 2e 32 20 22 0a 20 20 20 20 53 45 4c 45 43 54 20  .2 ".    SELECT 
04e0: 74 6f 6b 65 6e 20 46 52 4f 4d 20 24 74 62 6c 20  token FROM $tbl 
04f0: 57 48 45 52 45 20 69 6e 70 75 74 20 3d 20 27 4f  WHERE input = 'O
0500: 6e 45 20 74 57 6f 20 74 48 72 45 65 27 0a 20 20  nE tWo tHrEe'.  
0510: 22 20 7b 0a 20 20 20 20 6f 6e 65 20 74 77 6f 20  " {.    one two 
0520: 74 68 72 65 65 0a 20 20 7d 0a 7d 0a 0a 64 6f 5f  three.  }.}..do_
0530: 65 78 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 34  execsql_test 1.4
0540: 20 7b 0a 20 20 53 45 4c 45 43 54 20 74 6f 6b 65   {.  SELECT toke
0550: 6e 20 46 52 4f 4d 20 74 33 20 57 48 45 52 45 20  n FROM t3 WHERE 
0560: 69 6e 70 75 74 20 3d 20 27 31 78 32 78 33 78 27  input = '1x2x3x'
0570: 0a 7d 20 7b 31 20 32 20 33 7d 0a 0a 64 6f 5f 65  .} {1 2 3}..do_e
0580: 78 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 35 20  xecsql_test 1.5 
0590: 7b 0a 20 20 53 45 4c 45 43 54 20 74 6f 6b 65 6e  {.  SELECT token
05a0: 20 46 52 4f 4d 20 74 31 20 57 48 45 52 45 20 69   FROM t1 WHERE i
05b0: 6e 70 75 74 20 3d 20 27 31 78 32 78 33 78 27 0a  nput = '1x2x3x'.
05c0: 7d 20 7b 31 78 32 78 33 78 7d 0a 0a 64 6f 5f 65  } {1x2x3x}..do_e
05d0: 78 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 36 20  xecsql_test 1.6 
05e0: 7b 0a 20 20 53 45 4c 45 43 54 20 74 6f 6b 65 6e  {.  SELECT token
05f0: 20 46 52 4f 4d 20 74 33 20 57 48 45 52 45 20 69   FROM t3 WHERE i
0600: 6e 70 75 74 20 3d 20 27 31 27 27 32 78 33 78 27  nput = '1''2x3x'
0610: 0a 7d 20 7b 31 27 32 20 33 7d 0a 0a 64 6f 5f 65  .} {1'2 3}..do_e
0620: 78 65 63 73 71 6c 5f 74 65 73 74 20 31 2e 37 20  xecsql_test 1.7 
0630: 7b 0a 20 20 53 45 4c 45 43 54 20 74 6f 6b 65 6e  {.  SELECT token
0640: 20 46 52 4f 4d 20 74 33 20 57 48 45 52 45 20 69   FROM t3 WHERE i
0650: 6e 70 75 74 20 3d 20 27 27 0a 7d 20 7b 7d 0a 0a  nput = ''.} {}..
0660: 64 6f 5f 65 78 65 63 73 71 6c 5f 74 65 73 74 20  do_execsql_test 
0670: 31 2e 38 20 7b 0a 20 20 53 45 4c 45 43 54 20 74  1.8 {.  SELECT t
0680: 6f 6b 65 6e 20 46 52 4f 4d 20 74 33 20 57 48 45  oken FROM t3 WHE
0690: 52 45 20 69 6e 70 75 74 20 3d 20 4e 55 4c 4c 0a  RE input = NULL.
06a0: 7d 20 7b 7d 0a 0a 64 6f 5f 65 78 65 63 73 71 6c  } {}..do_execsql
06b0: 5f 74 65 73 74 20 31 2e 39 20 7b 0a 20 20 53 45  _test 1.9 {.  SE
06c0: 4c 45 43 54 20 2a 20 46 52 4f 4d 20 74 33 20 57  LECT * FROM t3 W
06d0: 48 45 52 45 20 69 6e 70 75 74 20 3d 20 31 32 33  HERE input = 123
06e0: 0a 7d 20 7b 31 32 33 20 31 32 33 20 30 20 33 20  .} {123 123 0 3 
06f0: 30 7d 0a 0a 64 6f 5f 65 78 65 63 73 71 6c 5f 74  0}..do_execsql_t
0700: 65 73 74 20 31 2e 31 30 20 7b 0a 20 20 53 45 4c  est 1.10 {.  SEL
0710: 45 43 54 20 2a 20 46 52 4f 4d 20 74 31 20 57 48  ECT * FROM t1 WH
0720: 45 52 45 20 69 6e 70 75 74 20 3d 20 27 61 20 62  ERE input = 'a b
0730: 20 63 27 20 41 4e 44 20 74 6f 6b 65 6e 20 3d 20   c' AND token = 
0740: 27 62 27 3b 0a 7d 20 7b 0a 20 20 7b 61 20 62 20  'b';.} {.  {a b 
0750: 63 7d 20 62 20 32 20 33 20 31 0a 7d 0a 0a 64 6f  c} b 2 3 1.}..do
0760: 5f 65 78 65 63 73 71 6c 5f 74 65 73 74 20 31 2e  _execsql_test 1.
0770: 31 31 20 7b 0a 20 20 53 45 4c 45 43 54 20 2a 20  11 {.  SELECT * 
0780: 46 52 4f 4d 20 74 31 20 57 48 45 52 45 20 74 6f  FROM t1 WHERE to
0790: 6b 65 6e 20 3d 20 27 62 27 20 41 4e 44 20 69 6e  ken = 'b' AND in
07a0: 70 75 74 20 3d 20 27 61 20 62 20 63 27 3b 0a 7d  put = 'a b c';.}
07b0: 20 7b 0a 20 20 7b 61 20 62 20 63 7d 20 62 20 32   {.  {a b c} b 2
07c0: 20 33 20 31 0a 7d 0a 0a 64 6f 5f 65 78 65 63 73   3 1.}..do_execs
07d0: 71 6c 5f 74 65 73 74 20 31 2e 31 32 20 7b 0a 20  ql_test 1.12 {. 
07e0: 20 53 45 4c 45 43 54 20 2a 20 46 52 4f 4d 20 74   SELECT * FROM t
07f0: 31 20 57 48 45 52 45 20 69 6e 70 75 74 20 3c 20  1 WHERE input < 
0800: 27 62 27 20 41 4e 44 20 69 6e 70 75 74 20 3d 20  'b' AND input = 
0810: 27 61 20 62 20 63 27 3b 0a 7d 20 7b 0a 20 20 7b  'a b c';.} {.  {
0820: 61 20 62 20 63 7d 20 61 20 30 20 31 20 30 20 0a  a b c} a 0 1 0 .
0830: 20 20 7b 61 20 62 20 63 7d 20 62 20 32 20 33 20    {a b c} b 2 3 
0840: 31 20 0a 20 20 7b 61 20 62 20 63 7d 20 63 20 34  1 .  {a b c} c 4
0850: 20 35 20 32 0a 7d 0a 0a 64 6f 5f 65 78 65 63 73   5 2.}..do_execs
0860: 71 6c 5f 74 65 73 74 20 31 2e 31 33 2e 31 20 7b  ql_test 1.13.1 {
0870: 0a 20 20 43 52 45 41 54 45 20 54 41 42 4c 45 20  .  CREATE TABLE 
0880: 63 31 28 78 29 3b 0a 20 20 49 4e 53 45 52 54 20  c1(x);.  INSERT 
0890: 49 4e 54 4f 20 63 31 28 78 29 20 56 41 4c 55 45  INTO c1(x) VALUE
08a0: 53 28 27 61 20 62 20 63 27 29 3b 0a 20 20 49 4e  S('a b c');.  IN
08b0: 53 45 52 54 20 49 4e 54 4f 20 63 31 28 78 29 20  SERT INTO c1(x) 
08c0: 56 41 4c 55 45 53 28 27 64 20 65 20 66 27 29 3b  VALUES('d e f');
08d0: 0a 7d 0a 64 6f 5f 65 78 65 63 73 71 6c 5f 74 65  .}.do_execsql_te
08e0: 73 74 20 31 2e 31 33 2e 32 20 7b 0a 20 20 53 45  st 1.13.2 {.  SE
08f0: 4c 45 43 54 20 2a 20 46 52 4f 4d 20 63 31 2c 20  LECT * FROM c1, 
0900: 74 31 20 57 48 45 52 45 20 69 6e 70 75 74 20 3d  t1 WHERE input =
0910: 20 78 20 41 4e 44 20 63 31 2e 72 6f 77 69 64 3d   x AND c1.rowid=
0920: 74 31 2e 72 6f 77 69 64 3b 0a 7d 20 7b 0a 20 20  t1.rowid;.} {.  
0930: 7b 61 20 62 20 63 7d 20 7b 61 20 62 20 63 7d 20  {a b c} {a b c} 
0940: 61 20 30 20 31 20 30 20 0a 20 20 7b 64 20 65 20  a 0 1 0 .  {d e 
0950: 66 7d 20 7b 64 20 65 20 66 7d 20 65 20 32 20 33  f} {d e f} e 2 3
0960: 20 31 20 0a 7d 0a 0a 0a 23 2d 2d 2d 2d 2d 2d 2d   1 .}...#-------
0970: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
0980: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
0990: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
09a0: 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d 2d  ----------------
09b0: 2d 2d 0a 23 20 45 72 72 6f 72 20 63 61 73 65 73  --.# Error cases
09c0: 2e 0a 23 0a 64 6f 5f 63 61 74 63 68 73 71 6c 5f  ..#.do_catchsql_
09d0: 74 65 73 74 20 32 2e 30 20 7b 0a 20 20 43 52 45  test 2.0 {.  CRE
09e0: 41 54 45 20 56 49 52 54 55 41 4c 20 54 41 42 4c  ATE VIRTUAL TABL
09f0: 45 20 74 58 20 55 53 49 4e 47 20 66 74 73 33 74  E tX USING fts3t
0a00: 6f 6b 65 6e 69 7a 65 28 6e 6f 73 75 63 68 74 6f  okenize(nosuchto
0a10: 6b 65 6e 69 7a 65 72 29 3b 0a 7d 20 7b 31 20 7b  kenizer);.} {1 {
0a20: 75 6e 6b 6e 6f 77 6e 20 74 6f 6b 65 6e 69 7a 65  unknown tokenize
0a30: 72 3a 20 6e 6f 73 75 63 68 74 6f 6b 65 6e 69 7a  r: nosuchtokeniz
0a40: 65 72 7d 7d 0a 0a 64 6f 5f 63 61 74 63 68 73 71  er}}..do_catchsq
0a50: 6c 5f 74 65 73 74 20 32 2e 31 20 7b 0a 20 20 43  l_test 2.1 {.  C
0a60: 52 45 41 54 45 20 56 49 52 54 55 41 4c 20 54 41  REATE VIRTUAL TA
0a70: 42 4c 45 20 74 34 20 55 53 49 4e 47 20 66 74 73  BLE t4 USING fts
0a80: 33 74 6f 6b 65 6e 69 7a 65 3b 0a 20 20 53 45 4c  3tokenize;.  SEL
0a90: 45 43 54 20 2a 20 46 52 4f 4d 20 74 34 3b 0a 7d  ECT * FROM t4;.}
0aa0: 20 7b 31 20 7b 53 51 4c 20 6c 6f 67 69 63 20 65   {1 {SQL logic e
0ab0: 72 72 6f 72 20 6f 72 20 6d 69 73 73 69 6e 67 20  rror or missing 
0ac0: 64 61 74 61 62 61 73 65 7d 7d 0a 0a 0a 66 69 6e  database}}...fin
0ad0: 69 73 68 5f 74 65 73 74 0a                       ish_test.