Xóa tài liệu thuộc loại trong Elasticsearch

Question

Tôi muốn xóa tất cả tài liệu được lập chỉ mục trong một loại trong Elasticsearch, sử dụng api HTTP/REST, nhưng tôi không muốn xóa ánh xạ cho loại này

Làm cách nào tôi có thể xây dựng truy vấn trong URL để làm điều này?

Answer 1

Trước khi lệnh thực hiện, chỉ số/bản đồ tiểu bang; (Ảnh chụp màn hình lấy từ elasticsearch cắm đầu giao diện web)

lệnh;

curl -XDELETE 'http://localhost:9200/publishercategoryeu/autocomplete/_query' -d ' 
{ 
    "query": { 
    "bool": { 
     "must": [ 
     { 
      "match_all": {} 
     } 
     ] 
    } 
    } 
} 
' 

Kết quả;

Sau khi lệnh thực hiện, tình trạng chỉ số/bản đồ;

Như chúng ta có thể thấy chúng tôi đã xóa tất cả các tài liệu được lập chỉ mục trong vòng một kiểu (mapping) mà không chỉ xóa hoặc loại (mapping).

Answer 2

Xóa đơn giản theo truy vấn bằng truy vấn match_all sẽ thực hiện thủ thuật. Bạn có thể lấy thêm thông tin ở đây:

delete by query api

Ngoài ra, bạn có thể xóa toàn bộ loại và tận dụng các mẫu api. Chỉ cần thả một tập tin trong config/templates/thư mục của bạn có chứa mẫu của bạn, và bạn sẽ không bao giờ mất nó. Ánh xạ thực sự sẽ bị mất khi bạn xóa bản đồ, nhưng mẫu sẽ được sử dụng lại ngay khi bạn lập chỉ mục lại một lần nữa. Dưới đây là một số thông tin thêm:

template api

EDIT: mới xóa api: https://www.elastic.co/guide/en/elasticsearch/reference/current/docs-delete.html

Answer 3

sử dụng:

curl -XDELETE 'http://{server}/{index_name}/{type_name}/' 

(như trong documentation)

Answer 4

Với lệnh sau trong plugin elasticsearch đầu tôi đã có thể xóa tất cả các văn bản của loại logs từ chỉ số logstash mà không xóa các bản đồ:

{"query":{"match_all":{}}} 

Để không gian trống trên đĩa bạn cũng phải tối ưu hóa chỉ mục (Hành động-> Tối ưu hóa cho chỉ mục logstash trong plugin đầu) sau khi xóa tài liệu.

Answer 5

Nếu bạn muốn làm điều này trong golang, sử dụng thư viện "olviere/elastic", bạn có thể sử dụng mã này, giả sử bạn có một khách hàng yourClient, và yourIndex và yourType:

bq := elastic.NewBoolQuery() 
    bq.Must(elastic.NewMatchAllQuery()) 
    _, err := elastic.NewDeleteByQueryService(yourClient). 
     Index(yourIndex). 
     Type(yourType). 
     Query(bq). 
     Do() 

Answer 6

$ curl -XDELETE 'http://localhost:9200/twitter/tweet/_query?q=user:kimchy' 

$ curl -XDELETE 'http://localhost:9200/twitter/tweet/_query' -d '{ 
    "query" : { 
     "term" : { "user" : "kimchy" } 
    } 
} 

Answer 7

câu trả lời trước sẽ không hoạt động với phiên bản mới nhất của Elasticsearch. "Xóa theo truy vấn" đã không được chấp nhận từ Elasticsearch 2.0. Elasticsearch tài liệu nói rằng nó có thể gây ra lỗi OutOfMemoryError trong quá trình lập chỉ mục đồng thời và có thể làm cho bản sao chính và bản sao trở nên không nhất quán. Nếu bạn muốn theo dõi lịch sử của sự cố trong Github.

Hiện tại, thực hiện nhiều bước để xóa tất cả tài liệu khỏi type.

1. Tìm tất cả các id của tài liệu mà bạn cần xóa. Cách hiệu quả nhất để thực hiện thao tác này là sử dụng scroll/scan API để tìm tất cả các id phù hợp cho một loại nhất định.

2. Đưa ra yêu cầu hàng loạt để xóa tài liệu theo id. Một ví dụ được cung cấp bên dưới.

   curl -XPOST 'http://localhost:9200/_bulk' -d ' 
       { "delete": { "_index": "index", "_type": "type", "_id": "1"} 
       { "delete": { "_index": "index", "_type": "type", "_id": "2"}' 
   

Lưu ý rằng nếu bạn đang cung cấp một đầu vào tập tin văn bản để cuộn tròn, bạn phải sử dụng --data-binary cờ thay vì đơn giản -d.