2. 程式人生 > >資料庫分詞查詢的優缺點以及英文和中文各自的分詞方法（一）

資料庫分詞查詢的優缺點以及英文和中文各自的分詞方法（一）

阿新 • • 發佈：2019-02-18
1.為什麼需要資料庫分詞查詢
  假設有一個數據庫表，表中有一個title欄位 table1 假如有300萬的資料 id為主鍵，title也設定了索引
id title
1 這是計算機，和計算機相關，電腦相關
2 這個標題是資料庫，與專利資料庫有關係
3 這個標題是與淘寶user資料庫
... ...................................................
假如我們需要通過title中的某些欄位去進行查詢，如果不分詞查詢，那麼這樣的缺點如下
  1. 查詢速度上的問題，如果我們 想查詢title中 有 資料庫 的欄位的所有內容
我們只能用   select * from table1 where title like '%資料庫%'
         注意： like %xxx% 這樣查詢，將會是沒有索引的查詢，查詢的速度會非常的慢，40萬的資料，這樣查詢需要的時間是用 = 查詢的幾千倍 使用like'%%' 速度非常慢，在需要大量查詢的時候，效能上會出現很大的問題            2. 查詢的準確性問題，假如我們想查詢有 專利資料庫 的欄位，但是，我們如果打錯了，打成了查詢 '專利的資料庫'，多了一個'的'字,     查詢的sql 語句為 select * from table1 where title like '專利的資料庫'    這樣，我們是查詢不到id=2的這一條資料的 如果使用分詞查詢，上述問題將會得到解決
 我們將關鍵字進行分詞，建立關鍵字與id的關係，同時建立索引 比如我們將title進行分詞，得到如下的表（注：下表我只列出id=2的分詞部分） keywordsearch1表 id為主鍵，keyword設定索引
id keyword
...... xxxxxxx
2 標題
2 資料庫
2 專利
2 關係
....... xxxxxxxxx
1. 我們如果要查詢tutle中有資料庫的。可以直接用 select * from table where id in（select id from keywordsearch1 where keyword='資料庫'）
或者程式中,先在分詞表中查詢出id，再用一個for迴圈，迴圈select * from table where id =xxx 這樣一來，查詢都是有索引的，速度會非常的迅速.速度問題解決了 2. 對於準確度問題，比如搜尋 專利的資料庫 程式會先和分詞的方法一樣，將其分成 專利、資料庫 我們查詢的時候 就分別keywordsearch1表去查詢這兩個對應的id,取得他們的交集，然後再根據id去主表中查詢相應的資料，這樣，就保證了我們能夠得到我們想要的資料了 更多內容，看下一章節

相關推薦

資料庫分詞查詢的優缺點以及英文和中文各自的分詞方法（一）

1.為什麼需要資料庫分詞查詢  假設有一個數據庫表，表中有一個title欄位 table1 假如有300萬的資料 id為主鍵，title也設定了索引 id title 1 這是計算機，

JDBC資料庫連線池連線資料庫及資料庫操作DAO層設計通用更新及查詢方法（一）

該篇文章介紹了資料庫連線池獲取資料庫連線以及資料庫操作的基本使用，然後主要提供了java專案案例中dao層的一種設計，利用反射的原理定義了通用的查詢方法可以對應所有的表和例項。文章中的每段程式碼都提供了詳細的註釋及邏輯步驟 首先匯入資料庫連線的所需要的jar包：    

前臺使用資料庫model和Html.BeginForm("action", "controller", FormMethod.Post)提交表單，在儲存到資料庫前對錶單項進行判斷的方法（一）

前端： @model DBEF.XXX  @using (Html.BeginForm("action", "controller", FormMethod.Post))     {         @Html.Valid

Swift 4 和 Objective-C 混合編程（一） 快速起步

命名方式 import 編譯器 選擇性 工程 Swift 4 和 Objective-C 在同一個工程裏的混搭編程的方法你可以在 xcode 裏同時使用 Swift 和 Objective-C（以下簡稱OC）來寫代碼，混搭編程的好處很多，比如允許大量代碼的復用，在性能和開發效率之間找到平衡

多種排序算法的思路和簡單代碼的實現（一）

insert i++ 前後端 分享 size quicksort 執行 判斷 clas 就自己簡單的理解了一些排序算法（JAVA）思路和代碼分享給大家：歡迎大家進行交流。 直接插入排序，折半插入排序，冒泡排序，快速排序 1 public class Sort { 2

Web網站的測試流程和方法（一）

不同的 ui測試 放置 有時 測試流程 數據 測試的 雲測 切換 近期，Alltesting的眾測平臺　　有不少web網站的功能測試項目，像：　　農事GERP種植系統 　　雲測試平臺 　　頭號專家網項目第三輪功能測試 　　於是，有些新加入眾測平臺的

MVVM模式解析和在WPF中的實現（一）

開發 特點 還需 如果 情況下 依次 顯示 尋找 這也 MVVM模式簡介 MVVM是Model、View、ViewModel的簡寫，這種模式的引入就是使用ViewModel來降低View和Model的耦合，說是降低View和Model的耦合。也可以說是是降低界面和邏輯的耦合

C++快速入門---cin和cout輸入的一些方法（2）

C++快速入門---cin輸入的一些方法（2）   注意： cin.ignore()：忽略前7個字元 cin.getline()：接收一個字串 cin.get()：獲取一個字元 cin.peek()：提取一個字元，不會改變輸入流裡面的資料 cin.gcount(

分頁技術原理與實現之分頁的意義及方法（一）

轉載自https://www.jb51.net/article/86326.htm。 什麼是分頁技術  分頁,是一種將所有資料分段展示給使用者的技術.使用者每次看到的不是全部資料,而是其中的一部分,如果在其中沒有找到自習自己想要的內容,使用者可以通過制定頁碼或是翻頁的方式轉換可見內容,

ASP.NET Core MVC 和 Entity Framework Core 連線mysql（一）

看到官網上的教程可操作性不強，而且資料庫是sql server所以這裡另寫一點記錄不同，寫成一文章提交超時。所以分開 新建工程 確保安裝了Visual Studio 2017 和.net core 2.0 或以上 新建一個專案 專案名稱為ContosoUnivers

有關PHP異常和錯誤處理機制的思考（一）

我們從一門語言的層面上來看的話，這個語言通常具有很多的錯誤處理的一個模式，但是這些個錯誤處理模式，往往就是建立在約定俗成的基礎上，也可以說，這些錯誤都是可以預知的。 但是在大型的一個專案或者說系統裡，如果我們每次呼叫一個功能模組的時候，都去逐一檢測我們這個模組中肯能存在的錯誤，很明顯的就會看

資料結構和演算法 | 紅黑樹演算法（一）

1 紅黑樹簡介 紅黑樹是一種自平衡的二叉查詢樹，是一種高效的查詢樹。它是由 Rudolf Bayer 於1978年發明，在當時被稱為對稱二叉 B 樹(symmetric binary B-trees)。後來，在1978年被 Leo J. Guibas 和 Rob

Android---安裝 Android第一天——安裝Android Studio 3.0和第一個Hello World程式（一）

原 Android第一天——安裝Android Studio 3.0和第一個Hello World程式（一） 2018年03月09日 11:26:38 閱讀數：9423

Python和R語言之間的抉擇（一）

在資料分析流行的開始，我們已經看到了資料分析的日後很好的發展前景，通過資料分析我們可以做好企業的規劃以及發現企業自身存在的問題。同時，資料分析行業的薪資待遇都是很好的。正因為如此，很多人開始學習資料分析知識，但是資料分析是需要學習程式設計知識的，而程式設計知識中有Python和R語言，那麼大家知道不知道這

Android ——安裝Android Studio 3.0和第一個Hello World程式（一）

Android第一天——安裝Android Studio 3.0和第一個Hello World程式（一） 轉自：https://blog.csdn.net/tangjie134/article/details/79495204​​​​​​​ 1.Android Studio 3.0和SDK獲

策略模式實現 retrofit 的get和post請求的公共引數（一）

策略模式的作用，作用是替換if，elst if ,switch case，可是為什麼我就替換不了呢？ 比如： 圖書價格，初級會員9折，高階會員打8折 通常實現： private double getPrice(int grade, doubl

使用HAL庫、STM32CubeMX和Keil 5開發入門教程（一）：點亮一盞LED燈（NUCLEO-F411RE）

本教程以點亮一盞LED燈為目的為大家演示用STM32CubeMX、Keil、ST-Link開發STM32程式的一般方法。 一、學習前的準備工作 硬體：一塊STM32開發板，一個ST-Link；（我使用的開發板是NUCLEO-F411RE） 軟體：裝好ST-

Android模組化和元件化開發簡單理解（一）

模組化和元件化可以理解為同一個概念： 將一個app分成多個模組，每個模組都是一個元件（module），開發過程中讓這些元件相互依賴或者單獨除錯某個元件。在釋出的時候將這些元件合併成一個apk。 Android元件化我的理解是 application與library之間相互

wkwebview 和H5互動時的坑（一）

WKWebView 白屏問題（或者是說頁面載入有問題，出不來） 在使用微博viewjavascriptbridge 時 與到了一個這樣的問題：       在使用拍照或選擇相簿的時候，選完圖片後回到頁面來是就白屏了。 為什麼會出現這樣的問題：      因為拍照是高記憶

關於WPF和Windows Form的區別理解（一）

最近專案要上線，處於緊張的測試中，一整天都在盯著電腦螢幕上那些晃動的波形做測試，excel中記滿了密密麻麻的測試資料，看得眼睛都疼了。把眼睛從電腦螢幕上移開，實在是看不下去了。可上班時間，又不能無所事事，所以一邊讓電腦中的測試程式執行著，自己則拿起桌上的《深入淺出WPF》看