Cài đặt Full text Search SQL server

BÀI TẬP KỸ NĂNG
MÔN HỌC: HỆ QUẢN TRỊ CƠ SỞ DỮ LIỆU SQL SERVER (IT209)
ĐỀ TÀI: FULL-TEXT SEARCH – TÌM KIẾM TOÀN VĂN

Họ và tên: Phan Văn Hoạt
Lớp: QTN17
Mã học viên: 16-2-52480201-00038

MỤC TIÊU


Hiểu được khái niệm, công dụng và chức năng của Full-text search
(FTS)



Biết cách thiết lập và sử dụng FTS



Biết vận dụng FTS trong SQL Server cho học tập cũng như thực tế
công việc

Giới thiệu về Full –text search
Các từ khóa và cấu trúc câu sử dụng trong FTS
Cách thiết lập, cài đặt, sử dụng FTS
Ưu điểm, nhược điểm của FTS
Kết luận

GIỚI THIỆU VỀ FULL – TEXT SEARCH
1. Full-text seacrch là gì?
- Full-Text search (FTS) là cách tự nhiên nhất để tìm kiếm thông tin.

Gống như Google, ta chỉ cần gõ từ khóa và nhấn enter thế là
có kết quả trả về
- Full-Text search đề cập đến một công nghệ tìm kiếm thông tin mới
trong cơ sở dữ liệu.
- Full-Text search (FTS) cho phép tìm kiếm ký tự, chuỗi, cụm từ
trong cơ sở dữ liệu thay vì tìm kiếm trên từng cột dữ liệu của Table.
- Full-Text Search cho phép tạo chỉ mục một cách uyển chuyển và
nhanh chóng dễ truy vấn với từ khóa trên chuỗi dữ liệu trong cơ sở
dữ liệu SQL Server

GIỚI THIỆU VỀ FULL – TEXT SEARCH
2. Khi nào nên dùng FTS
Khi

cần tìm kiếm trong một database lớn.

Cần

tra cứu một từ hay một cụm từ một cách nhanh chóng.

Tra

cứu một cụm từ lớn hoặc trong một database đa ngôn ngữ.

3. Tại sao phải chọn FTS
FTS

cho kết quả tìm kiếm nhanh và chính xác.

FTS

hỗ trợ đa ngôn ngữ.

FTS

không giới hạn chiều dài cũng như dạng của chuỗi tìm kiếm.

CÁC TỪ KHÓA VÀ CẤU TRÚC CÂU TRONG FTS
1.

Các hàm chủ yếu sử dụng trong Full text search



Hàm thông thường sử dụng mệnh đề LIKE



Hàm CONTAINS.



Hàm FREETEXT.



Hàm CONTAINSTABLE.



Hàm FREETEXTTABLE.

2. Các hàm thường sử dụng trong FTS và cấu trúc
2.1 Câu truy vấn thông thường sử dụng LIKE
SELECT*FROM *WHERE*LIKE ‘%keyword%’
- Nhược điểm: + Độ nhiễu cao
+ Không linh hoạt
+ Truy vấn chậm khi không dùng INDEX

CÁC TỪ KHÓA VÀ CẤU TRÚC CÂU TRONG FTS
2. Các hàm thường sử dụng trong FTS và cấu trúc
2.2 Hàm FREETEXT
-Đây
-Cú

là kiểu tìm kiếm theo kiểu Fuzzy (tìm kiếm mờ)

pháp hàm:
SELECT * FROM * WHERE FREETEXT (*, ‘keyword’)

2.3 Hàm CONTAINS
-Đây

-Cú

là kiểu tìm kiếm theo Boolean với and, or, near..

pháp hàm:
SELECT * FROM * WHERE CONTAINS (*,‘“keyword” and,or,near… “keyword”’)

THIẾT LẬP VÀ CÀI ĐẶT FTS
1. Thiết lập và cài đặt FTS

THIẾT LẬP VÀ CÀI ĐẶT FTS
2. Câu hỏi đặt ra
Bạn

đã bao giờ sử dụng Full-text Search chưa? Vì sao?

Bạn

hãy nêu sự giống nhau và khác nhau khi sử dụng hai hàm

FREETEXT và CONTAINS trong Full-text Seach? Ưu điểm,
nhược điểm của chúng?
Nêu

ưu điểm và nhược điểm khi sử dụng FTS so với sử dụng

các kiểu tìm kiếm khác ?

ƯU ĐIỂM VÀ NHƯỢC ĐIỂM CỦA FTS
1. Ưu điểm
Kết

quả search trả về nhanh và nhiều khi sử dụng index.

Hỗ

trợ đa ngôn ngữ.

Tối

ưu hơn việc sử dụng LIKE khi thao tác với các trường text lớn.

2. Nhược điểm
Phải

cài đặt thêm và cấu hình cho trường hoặc bảng muốn tìm kiếm
bằng FTS
Cần

nhớ một số hàm khi tìm kiếm và viết query.

Phụ

thuộc vào Microsoft search service.

KẾT LUẬN
 FTS

cung cấp cho người dùng các tính năng tìm kiếm thông minh,
chúng ta có thể tìm kiếm theo một từ, cụm từ một cách chính xác
và nhanh chóng trong SQL với các hàm FREETEXT,
CONTAINS…

 FTS

cho phép tìm kiếm một cách thông minh, nhanh dẫn đến giảm
thời gian xử lý và tăng tốc độ xử lý công việc trong một CSDL lớn,
đem lại sự hài long cho người sử dụng.

 Như

vậy nếu bạn đang sử dụng SQL Server thì FTS là một lựa chọn
tốt khi tìm kiếm thông tin trong CSDL của bạn.

CHÚC QUÝ THẦY CÔ
VÀ CÁC ANH CHỊ SINH VIÊN SỨC KHỎE,
HỌC TẬP, CÔNG TÁC TỐT
XIN CHÂN THÀNH CẢM ƠN!

Bạn có bao giờ thắc mắc vì sao Google, các sàn thương mại điện tử như Lazada, Shopee, Alibaba lại có thể gợi ý sản phẩm ngay khi bạn nhập một từ khóa nào hay không? “Bí mật” đằng sau sự gợi ý này chính là Full-Text Search. Vậy, Full-Text Search là gì? Sử dụng Full-Text Search trong SQL Server như thế nào để phục vụ cho việc học tập nhé!

Tìm hiểu về Full-Text Search

Full-Text Search là gì?

Full-Text Search là một phương pháp/ kỹ thuật giúp bạn có thể tìm kiếm thông tin một cách tự nhiên nhất. Ngôn ngữ tìm kiếm thường là ngôn ngữ tự nhiên (ngôn ngữ bình thường của con người), được các công cụ tìm kiếm như: Google, Bing hay những sàn thương mại điện tử lớn trong thời điểm hiện tại sử dụng nhằm để hỗ trợ người dùng tìm kiếm thứ họ mong muốn.

Ví dụ: bạn tìm từ khóa hosting giá rẻ và Google sẽ trả lại kết quả tìm kiếm gợi ý như trong ảnh:

Full-Text Search bao gồm một hoặc nhiều cột khác nhau dựa trên những ký tự có trong bảng. Các cột dữ liệu có thể thuộc các kiểu dữ liệu như: char, varchar, nchar, nvarchar, text, ntext, image, xml hoặc varbinary (max) và cả FILESTREAM.

Vì sao nên sử dụng Full-Text Search?

Khi học và sử dụng SQL, chắc chắn bạn đã rất quen thuộc với câu lệnh LIKE trong SQL Server, ví dụ như:

SELECT column_name(s)
FROM table_name
WHERE column_name LIKE pattern;

Trong đó, LIKE sẽ tìm kiếm thông tin giới hạn dựa trên cột được quy định và câu lệnh LIKE làm việc “máy móc” theo kiểu khớp từng ký tự trong chuỗi. Vì thế, LIKE có các yếu điểm như:

• Độ chính xác thấp và khả năng tìm kết quả bằng tiếng Việt có đấu là rất tệ!
• Độ nhiễu kết quả đầu ra rất cao
• Tốc độ truy vấn rất chậm

Nếu bạn muốn có kết quả tốt hơn, khả năng tìm kiếm bằng ngôn ngữ tự nhiên được cải thiện hơn và hiệu suất cũng trở nên cao hơn thì Full-Text Search sẽ là một lựa chọn tốt hơn dành cho bạn.

Và yếu tố khiến Full-Text Search trở nên vượt trội hơn các kỹ thuật tìm kiếm khác đó chính là Inverted Index.

Inverted Index là gì?

Thông thường, các kỹ thuật tìm kiếm sẽ lập chỉ mục (index) theo đơn vị row(document). Đối với Inverted Index, lại khác.

Bạn có thể xem Inverted Index như một dạng cấu trúc dữ liệu có khả năng liên kết giữa các term với nhau và các tài liệu chứa term đó. Sau đây sẽ là một ví dụ để bạn có thể dễ dàng hiểu hơn:

QUẢNG CÁO

Chúng ta sẽ tạo ra 3 tài liệu A1, A2 và A3 như sau:

• A1 = “This is first document”
• A2 = “This is second one”
• A3 = “one two”

Sau đó, chúng ta sẽ có Inverted Index của 3 tài liệu trên được lưu lại như sau:

"this" => {A1, A2}
"is" => {A1, A2}
"first" => {A1}
"Document" => {A1}
"second" => {A2}
"one" => {A2, A3}
"two" => {A3}

Với phương thức này, cách Full-Text Search sẽ trở nên dễ dàng hơn bao giờ hết. Ví dụ:

Bạn muốn truy vấn cụm từ This is first, thông thường các phương pháp tìm kiếm khác sẽ quét từng chữ cái. Trong khi đó, bạn tìm kiếm cùng lúc trên 3 tài liệu lúc này bài toán tìm kiếm sẽ trở thành phép toán tử union của 3 tập hợp:

{A1, A2} union {A1, A2} union {A1} = {A1}

Vì vậy, khi bạn tìm kiếm dù cho các cụm từ đảo lộn thành: first This is hay This first is kết quả của phép toán union vẫn không đổi.

Tìm hiểu về cách hoạt động của Full-Text Search trong SQL Server

Khi các cột đã được lập chỉ mục, người dùng có thể sử dụng Full-Text Search theo các cách như sau:

• Một từ hoặc nhiều từ hoặc một cụm từ cụ thể (đơn giản nhất)
• Một hoặc một cụm từ bắt đầu bằng các văn bản được chỉ định (theo tiền tố)
• Một từ hoặc cụm từ gần giống với một từ hoặc một cụm từ khác (gần gũi)
• Các dạng đồng nghĩa của một cụm từ nào đó. Ví dụ trong tiếng Việt có đen, hắc, ô, mực.

Các truy vấn (query) sẽ không phân biệt kết quả chữ in hoa hay in thường. Ví dụ như “Tinohost” và “TinoHost” sẽ được trả về trong kết quả truy vấn.

Ví dụ về Full-Text Search trong SQL Server

Thiết lập cơ bản để thực hiện Full-Text Search trong SQL Server

Để làm việc với Full-Text Search, bạn sẽ cần phải có một cơ sở dữ liệu. Bạn có thể tải file fullTextDatabase.sql của LaptrinhVB.net để thử nghiệm.

Bước 1: kiểm tra Full-Text Search đã được cài đặt hay chưa, bạn chạy dòng lệnh sau trong SQL Studio Management:

SELECT SERVERPROPERTY('IsFullTextInstalled')

Nếu kết quả trả về bằng 0, bạn sẽ cần cài đặt gói Full-text Search bằng cách cài đặt lại SQL Server.

Bước 2: sau khi đã cài đặt Full-Text Search xong, bạn sẽ cần cài đặt catalog cho dữ liệu mẫu như sau:

• Click chuột phải vào cơ sở dữ liệu mẫu => New Full-text Catalog.
• Cửa sổ New Full-text Catalog hiện lên, bạn bấm chọn vào Accent-insensitive và chúng ta sẽ có kết quả như sau:

Bước 3: lập chỉ mục cho Full-text:

• Click chuột phải vào bảng cần lập index trong cơ sở dữ liệu => Full-text Index => Define Full-text Index…
• Các bước cài đặt khá đơn giản bạn chỉ chỉ cần thực hiện theo hướng dẫn của cửa sổ Full-text Indexing Wizard. Bạn có thể chọn ngôn ngữ tìm kiếm là Vietnamese dù khả năng hỗ trợ từ đồng nghĩa trong tiếng Việt vẫn chưa tốt lắm.
• Kết quả cuối cùng chúng ta có khi bạn đã xong:

Câu lệnh đơn giản với Full-Text Search trong SQL Server

Ví dụ, chúng ta sẽ chạy lệnh để tìm kiếm toàn bộ những sản phẩm có từ chu (chữ, chuột, chui, chuốt, chú,…), bạn chạy thử lệnh sau để so sánh giữa LIKE và Full-Text Search nhé:

SELECT * FROM Product WHERE Name LIKE ‘%chu%’
SELECT * FROM Product WHERE CONTAINS (Name, ‘“*chu*”’)

Kết quả của chúng ta sẽ có như sau:

Bạn có thể thấy lệnh LIKE sẽ đưa ra những kết quả như: chuột, chuối, Chucha.

Trong khi đó, với Full-Text Search chúng ta có: chứng, chucha, chữa, chức, chữ,…

Như bạn thấy, kết quả của Full-Text Search thực sự rất đúng với yêu cầu và hỗ trợ tiếng Việt có dấu tốt hơn LIKE rất nhiều!

Sau một quá trình dài tìm hiểu về Full-Text Search là gì, Full-Text Search trong SQL Server cũng như chúng ta đã học được cách sử dụng Full-Text Search trong SQL Server cơ bản. Tng hy vọng, bài viết này đã giúp ích được cho bạn trong việc học tập và tìm hiểu về Full-Text Search. Chúc bạn sẽ đạt được những kết quả tốt nhất trong học tập và làm việc.

Nếu nội dung bài viết có sai sót, bạn hãy liên hệ và góp ý để Tino Group có thể sửa đổi nhé! Cảm ơn bạn đã đồng hành cùng Tino Group.

Bài viết có tham khảo từ nhiều nguồn: LaptrinhVB.net, viblo.asia, Microsoft, Red-Gate và mssqltips.

Những câu hỏi thường gặp về Full-Text Search

CÔNG TY CỔ PHẦN TẬP ĐOÀN TINO

• Trụ sở chính: L17-11, Tầng 17, Tòa nhà Vincom Center, Số 72 Lê Thánh Tôn, Phường Bến Nghé, Quận 1, Thành phố Hồ Chí Minh
  Văn phòng đại diện: 42 Trần Phú, Phường 4, Quận 5, Thành phố Hồ Chí Minh
• Điện thoại: 0364 333 333
  Tổng đài miễn phí: 1800 6734
• Email:
• Website: www.tino.org