文本搜索解析器负责将原始文档文本分割成标记并识别每个标记的类型，其中可能类型的集合由解析器本身定义。请注意，解析器不会修改文本本身——它只是识别可能的单词边界。由于范围有限，因此与自定义词典相比，对应用程序特定的自定义解析器的需求较少。目前，PostgreSQL仅提供一个内置解析器，它已被发现适用于各种应用。

内置解析器名为pg_catalog.default。它识别23种标记类型，如表 12.1所示。

解析器可能会从同一文本片段生成重叠的标记。例如，带连字符的单词将同时被报告为整个单词和每个组成部分。

SELECT alias, description, token FROM ts_debug('foo-bar-beta1');
      alias      |               description                |     token
-----------------+------------------------------------------+---------------
 numhword        | Hyphenated word, letters and digits      | foo-bar-beta1
 hword_asciipart | Hyphenated word part, all ASCII          | foo
 blank           | Space symbols                            | -
 hword_asciipart | Hyphenated word part, all ASCII          | bar
 blank           | Space symbols                            | -
 hword_numpart   | Hyphenated word part, letters and digits | beta1

这种行为是可取的，因为它允许搜索同时适用于整个复合词和组成部分。以下是一个更有启发性的示例

SELECT alias, description, token FROM ts_debug('http://example.com/stuff/index.html');
  alias   |  description  |            token
----------+---------------+------------------------------
 protocol | Protocol head | http://
 url      | URL           | example.com/stuff/index.html
 host     | Host          | example.com
 url_path | URL path      | /stuff/index.html