中文分詞
作者:一抹淺笑
瀏覽:689次
發(fā)布時(shí)間:2018-01-02




這是中文搜索引擎特有的過程,指的是將中間沒有空格的、連續(xù)的中文字符序列,分隔成一個(gè)一個(gè)單獨(dú)的、有意義的單詞的過程,在英文拉丁文文字中,詞與詞之間有空格自然區(qū)隔,所以沒有分詞的必要,而中文句子包含很多詞,詞之間沒有自然分隔,搜索引擎在提取、索引關(guān)鍵詞及用戶輸入了關(guān)鍵詞需要進(jìn)行排名時(shí),都需要先進(jìn)行分詞。