Làm cách nào để tối ưu hóa/tái cấu trúc mệnh đề TSQL "LIKE"?

Question

Tôi có một bảng có 117000 bản ghi. Tôi cần thực hiện tìm kiếm để kiểm tra 3 trường riêng biệt cho một mẫu chuỗi nhất định.

My mệnh đề where được như sau:

field1 LIKE '%' + @DESC + '%' 
OR field2 LIKE '%' + @DESC + '%' 
OR field3 LIKE '%' + @DESC + '%' 

Điều này dường như mất khoảng 24 giây bất kể đầu vào ...

Có cách nào tốt hơn để làm điều này? Ít hơn 10 (hoặc 5!) Giây sẽ thích hợp hơn nhiều.

Cảm ơn bạn đã được trợ giúp.

Answer 1

Sử dụng tìm kiếm toàn văn bản và CONTAINS. Không thể tối ưu hóa LIKE khi tìm kiếm ở giữa trường, ví dụ: khi biểu thức LIKE bắt đầu bằng '%', do đó, nó sẽ luôn quét toàn bộ bảng.

Answer 2

Bất cứ khi nào bạn bắt đầu tìm kiếm LIKE bằng ký tự đại diện, bạn đang thực hiện quét. Trừ khi bạn có thể thu hẹp tiêu chí tìm kiếm của mình để bao gồm ký tự đầu tiên (có thể không khả thi), bạn sẽ cần phải sử dụng Tìm kiếm văn bản đầy đủ.

Answer 3

thế nào về

field1 + field2 + field3 LIKE '%' + @DESC + '%' 

hoặc

CONTAINS(field1 + field2 + field3, @DESC) 

Answer 4

Bạn có thực sự cần phải bắt đầu với một ký tự đại diện? Tại sao? Thông thường, bạn có thể buộc người dùng nhập ít nhất ký tự đầu tiên. Tôi mang lại điều này bởi vì một số nhà phát triển chỉ sử dụng ký tự đại diện như một thói quen không phải vì có một yêu cầu. Trong hầu hết các trường hợp, người dùng sẽ có thể nhập ký tự đầu tiên trừ khi lưu trữ các chuỗi dài (như nói tên sân bay chính thức). Nếu không, bạn thực sự cần phải sử dụng chỉ mục toàn văn mặc dù thủ thuật của KM ngược lại là khá thú vị nếu bạn không cần ký tự đại diện ở cuối.

Nếu bạn có thể tránh làm những việc giết chết hiệu suất, hãy làm như vậy.

Answer 5

Trong khi tôi đồng ý với câu trả lời được chấp nhận, việc lập chỉ mục văn bản đầy đủ sẽ là giải pháp tốt nhất và không có nghĩa là ủng hộ việc sử dụng tìm kiếm ký tự đại diện hàng đầu nếu chúng được thực hiện thì là các bước tiềm năng có thể thực hiện làm cho hiệu suất của chúng ít xấu hơn.

Kalén Delaney trong cuốn sách "Microsoft SQL Server 2008 Internals" nói:

Collation có thể làm cho một sự khác biệt rất lớn khi SQL Server phải nhìn vào hầu tất cả các ký tự trong chuỗi. Đối với dụ, hãy nhìn vào những điều sau đây:

SELECT COUNT(*) FROM tbl WHERE longcol LIKE '%abc%' 

Điều này có thể thực hiện 10 lần nhanh hơn hoặc nhiều hơn với một collation nhị phân so với Windows chiếu nonbinary. Và với dữ liệu varchar, điều này thực thi nhanh hơn bảy hoặc tám lần với một đối chiếu SQL so với Windows collation.

Answer 6

Tôi đã thử một giải pháp khả thi. Trước khi giải pháp này thậm chí truy vấn không trả về kết quả và gây ra lỗi kết nối thời gian chờ.

Truy vấn của tôi đã có bộ lọc ngày và các tiêu chí khác.Tất cả các tiêu chí khác giống như tìm kiếm. Một từ khóa cột đã được tìm kiếm như '% abc%' trên cột ntext và nó đang thực hiện quét toàn bộ bảng.

Giải pháp:

Chia truy vấn trong 2 phần. 1) Phần đầu tiên trong CTE (Common Table Express) 2) Áp dụng tất cả các tiêu chí tìm kiếm trên CTE.

WITH SearchData(Column1,Column2,Column3,Column4,........) 
    AS 
    (
    SELECT Column1,Column2,Column3,Column4,........... 
    FROM myTable1 WITH(NOLOCK) 
      INNER JOIN MyTable2 WITH(NOLOCK) 
       ON MyTable1.id = MyTable2.Id 
    WHERE (MyTable1.CreationTime >= '2014-04-27' AND MyTable1.CreationTime <= '2014-05-01') 
) 

    SELECT DISTINCT top 250 Column1,Column2,Column3,Column4 
    FROM SearchData 
    WHERE (ISNULL(Column1,'') LIKE @Column1 +'%' OR @Column1 IS NULL) 
      and (Column2 LIKE @Column2+ '%' OR @Column2 IS NULL) 
      ... 
      ... 
      ... 
      ... 
      AND (Column10 like '%'+@Column10+'%' or @Column10 IS NULL) 
      AND @Column1+@Column2+@Column3+........@Column10 <> '' 
      ORDER BY [CreationTime] DESC 

Nó làm việc cho tôi.

Answer 7

Nếu bạn không thể sử dụng FullTextSearch, bạn có thể tăng tốc độ gấp 10 lần. Làm gì tiếp theo:

1 Thêm tính lĩnh vực:

alter table TableName 
add CalculatedColumnName as upper(Column1 + '|' + Column2...) collate Latin1_General_100_Bin2 
persisted; 

2 Thêm chỉ mục cho lĩnh vực tính toán:

create nonclustered index IDX_TableName_CalculatedColumnName 
on TableName(CalculatedColumnName); 

3 Thay đổi nội dung truy vấn của bạn

select count(*) 
from TableName 
where CalculatedColumnName like '%' + upper(@ParameterValue) + '%' collate Latin1_General_100_Bin2 

Nguồn: http://aboutsqlserver.com/2015/01/20/optimizing-substring-search-performance-in-sql-server