Đẩy nhanh PostgreSQL truy vấn, nơi dữ liệu là giữa hai ngày

Question

Tôi có một bảng lớn (> hàng 50m) trong đó có một số dữ liệu với một ID và dấu thời gian:

id, timestamp, data1, ..., dataN 

... với nhiều cột chỉ mục trên (id, timestamp).

tôi cần phải truy vấn bảng để chọn tất cả các hàng với một ID nhất định mà thời gian có được giữa hai ngày, mà tôi hiện đang làm sử dụng:

SELECT * FROM mytable WHERE id = x AND timestamp BETWEEN y AND z 

này hiện mất hơn 2 phút về một kết thúc cao máy (2x 3Ghz Xeon lõi kép với HT/RAM, RAM 16GB, ổ đĩa 2x 1TB trong RAID 0) và tôi thực sự muốn tăng tốc.

Tôi đã tìm thấy this tip đề xuất sử dụng chỉ mục không gian, nhưng ví dụ mà nó đưa ra là dành cho địa chỉ IP. Tuy nhiên, tốc độ tăng (436s đến 3s) là ấn tượng.

Tôi làm cách nào để sử dụng tính năng này với dấu thời gian?

Answer 1

Hãy chắc chắn rằng chỉ số này TableID + TableTimestamp, và bạn làm một truy vấn như:

SELECT 
    .... 
    FROM YourTable 
    WHERE TableID=..YourID.. 
     AND TableTimestamp>=..startrange.. 
     AND TableTimestamp<=..endrange.. 

nếu bạn áp dụng các chức năng để cột TableTimestamp của bảng trong WHERE, bạn sẽ không thể sử dụng hoàn toàn các chỉ số .

nếu bạn đã thực hiện tất cả điều này, thì phần cứng của bạn có thể không hoạt động.

nếu bạn đang sử dụng phiên bản 8.2 hoặc mới hơn, bạn nên thử:

WHERE (TableID, TableTimestamp) >= (..YourID.., ..startrange..) 
    and (TableID, TableTimestamp) <= (..YourID.., ..endrange..) 

Answer 2

tip Đó là chỉ thích hợp khi bạn có hai cột A và B và sử dụng các truy vấn như:

where 'a' between A and B 

Đó là không:

where A between 'a' and 'b' 

Sử dụng chỉ mục trên date(column) thay vì column có thể tăng tốc nó lên một chút.

Answer 3

Bạn có thể EXPLAIN truy vấn cho chúng tôi không? Sau đó, chúng tôi biết cơ sở dữ liệu thực thi truy vấn của bạn như thế nào. Và cấu hình thì sao? Cài đặt cho shared_buffers và work_mem là gì? Và khi nào bạn (hoặc hệ thống của bạn) chân không cuối cùng và phân tích? Và điều cuối cùng, bạn đang sử dụng hệ điều hành và phiên bản pgSQL nào?

Bạn có thể tạo các chỉ mục tuyệt vời nhưng không có cài đặt thích hợp, cơ sở dữ liệu không thể sử dụng chúng rất hiệu quả.