設定及管理搜尋的斷詞工具與字幹分析器

發行項
06/25/2013

斷詞工具及字幹分析器，會在所有全文檢索索引資料上執行語文分析。語文分析包括找出文字分界 (斷詞) 以及動詞變化 (字根處理)。斷詞工具與字幹分析器是語言特有的工具，而且語言分析的規則會因不同的語言而有所差異。對於給定的語言而言，「斷詞工具」(Word Breaker) 會根據語言的語彙規則，判斷文字分界存在的位置，藉以識別個別單字。每個單字 (也稱為 Token) 都會使用壓縮表示來插入全文檢索索引中，以便減少其大小。「字幹分析器」(Stemmer) 會根據該語言的規則來產生特定單字的字形變化 (例如，"running"、"ran" 和 "runner" 是 "run" 單字的不同形態)。

使用語言特有的斷詞工具會使得針對該語言產生的詞彙更正確。如果有語系的斷詞工具，但沒有特定次語言的斷詞工具，則會使用主要語言。例如，處理加拿大法文時會使用法文文字分隔。如果某種特定語文沒有文字分隔，則會使用中性文字分隔。使用中性文字分隔時，會以中性字元來中斷文字，例如空白與標點符號。

本主題內容

註冊斷詞工具
設定預設全文檢索語言選項
選擇索引資料行的語言
取得斷詞工具的相關資訊
疑難排解斷詞逾時錯誤
了解新斷詞工具的影響

註冊斷詞工具

若要使用某種語言的斷詞工具，您必須註冊它們。對於已註冊的斷詞工具而言，相關聯的語言資源 (字幹分析器、非搜尋字 (停用字詞) 和同義字檔案) 也會成為可供全文檢索索引和查詢作業使用。若要檢視目前已向 SQL Server 註冊之斷詞工具的語言清單，請使用下列 Transact-SQL 陳述式：

SELECT * FROM sys.fulltext_languages

如果您加入、移除或更改了斷詞工具，就必須重新整理支援全文檢索索引和查詢的 Microsoft Windows 地區設定識別碼 (LCID) 清單。如需詳細資訊，請參閱＜檢視或變更已註冊的篩選與斷詞工具＞。

設定預設全文檢索語言選項

若為當地語系化的 SQL Server 版本，SQL Server 安裝程式就會將 default full-text language 選項設定為伺服器的語言 (如果有相符項目存在的話)。若 SQL Server 為非當地語系化的版本時，則 default full-text language 選項會是英文。

建立或更改全文檢索索引時，您可以為每個全文檢索索引資料行指定不同的語言。若沒有為資料行指定語言，則預設值會是組態選項 default full-text language 的值。

[!附註]

除非在查詢中指定 LANGUAGE 選項，否則列在單一全文檢索查詢函數子句的所有資料行都必須使用相同的語文。查詢之全文檢索索引資料行所用的語言會決定要對全文檢索查詢述詞 (CONTAINS 和 FREETEXT) 與函數 (CONTAINSTABLE 和 FREETEXTTABLE) 之引數執行的語言分析。

選擇索引資料行的語言

建立全文檢索索引時，建議您針對每個索引資料行指定語言。如果沒有為資料行指定語言，就會使用系統預設語言。資料行的語言會決定哪些斷詞工具和字幹分析器要用於建立該資料行的索引。此外，資料行的全文檢索查詢會使用該語言的同義字檔案。

在選擇資料行語言以建立全文檢索索引時，必須考慮一些事項。這些考量與文字如何 Token 化，然後如何由全文檢索引擎編製索引有關。如需詳細資訊，請參閱＜選擇建立全文檢索索引時的語言＞。

檢視資料行的斷詞工具語言

管理全文檢索索引

sys.fulltext_index_columns (Transact-SQL)

SELECT 'language_id' AS "LCID" FROM sys.fulltext_index_columns;

取得斷詞工具的相關資訊

檢視斷詞工具、同義字和停用字詞表組合的 Token 化結果

sys.dm_fts_parser (Transact-SQL).

傳回已註冊斷詞工具的相關資訊

sp_help_fulltext_system_components (Transact-SQL)

疑難排解斷詞逾時錯誤

斷詞逾時錯誤可能會在各種情況中發生。如需有關這些情況以及如何在每種情況中回應的詳細資訊，請參閱＜MSSQLSERVER_30053＞。

了解新斷詞工具的影響

每個 SQL Server 版本一般都會包含新的斷詞工具，其語言規則比舊版斷詞工具更好而且更正確。新斷詞工具的行為可能會與全文檢索索引內斷詞工具的行為稍有不同，而全文檢索索引是從舊版 SQL Server 匯入。如果全文檢索目錄是在將資料庫升級為目前 SQL Server 版本時匯入，則這點就很明顯。全文檢索目錄中全文檢索索引所使用的一種或多種語言現在可能會與新的斷詞工具相關聯。如需詳細資訊，請參閱＜從 SQL Server 2005 更新全文檢索搜尋＞。

如需所有斷詞工具的完整清單，請參閱＜sys.fulltext_languages (Transact-SQL)＞。