Làm cách nào để tiếp tục quá trình sau khi chèn các hàng tra cứu không phù hợp vào bảng?

Question

Bên trong luồng dữ liệu, có thể thực hiện tra cứu, chèn các hàng không khớp, tra cứu lại và sau đó tiếp tục với tập dữ liệu đầy đủ (gốc) không?

Tôi không thể thấy cách bạn nhận/sử dụng lại các hàng được chèn sau khi họ đã đi đến số OLE DB Destination, cũng như tôi không thể thấy chi tiết số Multicast -trong).

Nếu không thể thực hiện được bên trong luồng dữ liệu, tôi có phải lặp lại tất cả logic lọc của mình trong tác vụ luồng dữ liệu trước đó chỉ đơn giản là thực hiện tra cứu lần đầu tiên?

Đây có thể là một câu hỏi rõ ràng/đã được trả lời, nhưng tôi không thể tìm thấy nhiều sau khi tìm kiếm.

Answer 1

Điều này là không thể trong một luồng dữ liệu duy nhất. Có rất nhiều "giải pháp" xung quanh nếu bạn google đủ nhưng họ bỏ qua thực tế kiến ​​trúc mà các hàng đi xuống một luồng dữ liệu trong bộ đệm/lô, xử lý song song.

Vì vậy, hình ảnh bạn có nhiều hàng "mới" đến trong 2 bộ đệm liền kề. Không có cách nào để đảm bảo rằng việc xử lý dòng "mới" của bạn từ bộ đệm 1 đã được hoàn thành trước khi bộ đệm 2 truy cập tra cứu ngược dòng của bạn. Điều này sẽ dẫn đến nhiều hàng "mới" được chèn vào bảng mục tiêu tra cứu của bạn cho cùng một khóa.

Bạn cần có một Luồng dữ liệu ngược dòng để thực hiện tất cả các yêu cầu tra cứu bắt buộc. Đây sẽ là một giải pháp hiệu quả hơn tổng thể trong thời gian chạy, vì chèn tra cứu của bạn có thể sử dụng Fast Load và Table Lock và Lookup phía dưới của bạn có thể là Full Cache.