如何規(guī)劃詞庫

一.詞庫的基礎(chǔ)搭建

詞庫結(jié)構(gòu)主要由三部份組成,如下圖

直達(dá)詞庫:用于特殊活動(dòng)/專題跳轉(zhuǎn)到指定頁面,例如用戶在搜索雙十一,那直接跳轉(zhuǎn)到雙十一分會(huì)場(chǎng);

聯(lián)想詞:用戶輸入關(guān)鍵詞,系統(tǒng)根據(jù)關(guān)鍵詞聯(lián)想出用戶可能需要輸入的詞匯;

分詞詞庫:用于對(duì)用戶輸入的關(guān)鍵詞進(jìn)行拆分,再對(duì)拆分的結(jié)果進(jìn)行頁面指向

分詞詞庫一般需要建立三種機(jī)制:

1)開源詞:這種詞可以直接在網(wǎng)上進(jìn)行搜索,然后給到技術(shù)讓他們存放;

2)自建分詞:這模塊主要給到做分詞的人進(jìn)行編輯維護(hù),優(yōu)化使用;

3)停用詞:這模塊用于讓服務(wù)器知道,用戶輸入的哪些詞匯不用回傳給到指定頁面;

二.建立緩存存儲(chǔ)機(jī)制

緩很多人會(huì)問,為什么要有個(gè)緩存存儲(chǔ)機(jī)制,直接根據(jù)用戶搜索的關(guān)鍵詞去服務(wù)器讀取數(shù)據(jù)不就行了嗎,這個(gè)理解是有誤的,如果直接去服務(wù)器查閱信息,查詢響應(yīng)速度會(huì)慢(如果sku數(shù)量有幾千萬,自己想想,這只是一方面),所以需要有個(gè)緩存存儲(chǔ)機(jī)制,每天設(shè)置幾個(gè)時(shí)間段定時(shí)去服務(wù)器根據(jù)關(guān)鍵詞刷一批數(shù)據(jù)存儲(chǔ)到緩存,效率會(huì)提升

三.命中邏輯

1.用戶輸入關(guān)鍵詞

2.讀取緩存

3.判斷是否聯(lián)想詞

4.是,將匹配的聯(lián)想詞在輸入框下顯示(排序和顯示數(shù)量每個(gè)人自己決定),否的話不聯(lián)想

5.1選擇系統(tǒng)給到的聯(lián)想詞,1)把聯(lián)想詞已有的數(shù)據(jù)傳給用戶;2)查詢直達(dá)詞庫判斷是否直達(dá)詞庫,如果是直達(dá)詞庫,跳轉(zhuǎn)到直達(dá)詞庫對(duì)應(yīng)的頁面路徑,不是直達(dá)詞則進(jìn)行分詞處理:通過查閱自建詞,開源詞,停用詞,分詞完成后,查詢商品庫,商品標(biāo)題中是否包含用戶的詞匯,如果有的話,直接把命中商品搜索結(jié)果頁傳給前端,沒有的話則提示找不到相關(guān)商品等

5.2不選擇系統(tǒng)給到的聯(lián)想詞/不是聯(lián)想詞,查詢直達(dá)詞庫判斷是否直達(dá)詞庫,如果是直達(dá)詞庫,跳轉(zhuǎn)到直達(dá)詞庫對(duì)應(yīng)的頁面路徑,不是直達(dá)詞則進(jìn)行分詞處理:通過查閱自建詞,開源詞,停用詞,分詞完成后,查詢商品庫,商品標(biāo)題中是否包含用戶的詞匯,如果有的話,直接把命中商品搜索結(jié)果頁傳給前端,沒有的話則提示找不到相關(guān)商品等

四.記錄用戶搜索詞

這個(gè)機(jī)制用于擴(kuò)大詞庫數(shù)據(jù)量,同時(shí)也能知道用戶習(xí)慣輸入哪些詞匯,對(duì)于后期的分析起到一定的幫助,把搜索詞匯大的同步到詞庫中等

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

推薦閱讀更多精彩內(nèi)容

  • 常用概念: 自然語言處理(NLP) 數(shù)據(jù)挖掘 推薦算法 用戶畫像 知識(shí)圖譜 信息檢索 文本分類 常用技術(shù): 詞級(jí)別...
    御風(fēng)之星閱讀 9,252評(píng)論 1 25
  • Day1:搜索框的設(shè)計(jì)(2days 4hours) 【學(xué)習(xí)part1—交互】 輸入框和提交按鈕的組合,頻率最高的組...
    外加劑_閱讀 744評(píng)論 0 2
  • 1. 案例分析:什么時(shí)全文檢索,如何實(shí)現(xiàn)全文檢索 ? 1.1 案例 ? 實(shí)現(xiàn)一個(gè)文件的搜索功能,通過關(guān)鍵字搜索文件...
    東方舵手閱讀 1,198評(píng)論 0 1
  • 鏈接分析 我們?cè)谧铋_始說過,搜索引擎在查找能夠滿足用戶需求的網(wǎng)頁時(shí),主要會(huì)考慮兩方面的因素,一方面是用戶發(fā)出的查詢...
    我偏笑_NSNirvana閱讀 3,316評(píng)論 1 12
  • 傍晚在馬路等紅綠燈的時(shí)候看到兩個(gè)穿校服的女孩。隔的有些遠(yuǎn)聽不清她們?cè)谡f些什么但應(yīng)該是很值得開心的事情。...
    少女私奔到月球閱讀 149評(píng)論 0 0