<strike id="w42qw"></strike>

   

    分詞技術 : 什么是分詞, 如何分詞搜索引擎會承認,這次第一位朋友提的問題，想必大家也聽說過，很好奇，什么是分詞技術，什么又是百度分詞呢?分詞大家容易理解。就是一段詞用字符分開，比如標點符號，空格等。

    那什么叫分詞技術呢？分詞技術就是SE針對用戶提交查詢的關鍵串進行的查詢處理后根據用戶的關鍵詞串用各種匹配方法進行的一種技術。大家好好理解。那么我們要理解分詞技術先要理解一個概念。那就是查詢處理，當用戶向搜索引擎提交查詢后，搜索引擎接收到用戶的信息要做一系列的處理。首先是到數據庫里面索引相關的信息，這就是查詢處理，那么查詢處理又是如何工作的呢？很簡單，把用戶提交的字符串沒有超過3個的中文字，就會直接到數據庫索引詞匯。超過4個中文字的，首先用分隔符比如空格，標點符號，將查詢串分割成若干子查詢串。

    舉個例子。“什么是百度分詞技術” 我們就會把這個詞分割成“ 什么是，百度，分詞技術。”這種分詞方法叫做反向匹配法。2.然后再看用戶提供的這個詞有沒有重復詞匯。

    如果有的話，會丟棄掉，默認為一個詞匯。接下來檢查用戶提交的字符串，有沒有字母和數字。

    如果有的話，就把字母和數字認為一個詞。好了，這就是SE的查詢處理。

    講了查詢處理后，大家對分詞技術，尤其是中文分詞技術有了一個基本的了解。