Nhóm của nhiều lĩnh vực và sản lượng tuple

Question

Tôi có một thức ăn chăn nuôi theo định dạng sau:

Hour Key ID Value 
    1 K1 001  3 
    1 K1 002  2 
    2 K1 005  4 
    1 K2 002  1 
    2 K2 003  5 
    2 K2 004  6 

và tôi muốn vào nhóm thức ăn bởi (Hour, Key) sau đó tổng hợp các Value nhưng giữ ID như một tuple:

({1, K1}, {001, 002}, 5) 
({2, K1}, {005}, 4) 
({1, K2}, {002}, 1) 
({2, K2}, {003, 004}, 11) 

Tôi biết cách sử dụng FLATTEN để tạo tổng của Value nhưng không biết cách xuất ID làm bộ tuple. Đây là những gì tôi có cho đến thời điểm này:

A = LOAD 'data' AS (Hour:chararray, Key:chararray, ID:chararray, Value:int); 
B = GROUP A BY (Hour, Key); 
C = FOREACH B GENERATE 
    FLATTEN(group) AS (Hour, Key), 
    SUM(A.Value) AS Value 
; 

Bạn có giải thích cách thực hiện việc này không? Cảm kích điều đó!

Answer 1

Bạn chỉ cần sử dụng toán tử chiếu túi, .. Điều này sẽ tạo ra một túi mới nơi các bộ dữ liệu chỉ có (các) phần tử bạn chỉ định. Trong trường hợp của bạn, hãy sử dụng A.ID. Thực tế, bạn đã sử dụng toán tử này để cung cấp đầu vào cho SUM - đầu vào cho tổng là một nhóm các phần tử đơn, mà bạn tạo bằng cách chiếu trường Value.

A = LOAD 'data' AS (Hour:chararray, Key:chararray, ID:chararray, Value:int); 
B = GROUP A BY (Hour, Key); 
C = FOREACH B GENERATE 
    FLATTEN(group) AS (Hour, Key), 
    A.ID, 
    SUM(A.Value) AS Value 
;