hive

6Nhiệt

2Trả lời

Tôi nhận được lỗi sau trong Hive khi thực hiện bất kỳ lệnh nào. hive> show tables; FAILED: Error in metadata: javax.jdo.JDOFatalInternalException: Unexpected exception caught. NestedThrowables: jav

5Nhiệt

2Trả lời

Sử dụng Pig/Hive để xử lý dữ liệu thay vì giảm mã trực tiếp bản đồ java?

(Thậm chí cơ bản hơn Difference between Pig and Hive? Why have both?) Tôi có một đường ống xử lý dữ liệu bằng văn bản trong một số Java bản đồ giảm nhiệm vụ trên Hadoop (mã tùy chỉnh của riêng tôi, có

23Nhiệt

3Trả lời

Làm cách nào để sao chép các tệp từ S3 sang Amazon EMR HDFS?

Tôi đang chạy hive trên EMR, và cần phải sao chép một số tệp vào tất cả các trường hợp EMR. Một cách mà tôi hiểu là chỉ sao chép các tập tin vào hệ thống tập tin cục bộ trên mỗi nút, còn cách khác là

5Nhiệt

2Trả lời

Làm thế nào để hive/hadoop đảm bảo rằng mỗi trình ánh xạ hoạt động trên dữ liệu cục bộ cho nó?

2 câu hỏi cơ bản mà rắc rối cho tôi: Làm thế nào tôi có thể chắc chắn rằng mỗi người trong 32 file hive sử dụng để lưu trữ bảng của tôi ngồi trên máy tính độc đáo của nó? Nếu điều đó xảy ra, làm thế n

16Nhiệt

4Trả lời

Hive: phân vùng động thêm vào bảng bên ngoài

Tôi đang chạy hive 071, xử lý dữ liệu hiện có là có cách bố trí thư mục sau: -TableName - d = (ví dụ 2011/08/01) - d = 2011-08-02 - d = 2011-08-03 ... vv dưới mỗi ngày tôi có tệp ngày. nay đến nạp dữ

22Nhiệt

3Trả lời

Hive không thể thiết lập bằng tay số gia giảm

Tôi có truy vấn hive sau: select count(distinct id) as total from mytable; có thể tự động sinh ra: 1408 Mappers 1 Giảm tôi cần phải tự đặt số bộ giảm tốc và tôi đã thử các cách sau: set mapred.reduc

15Nhiệt

6Trả lời

cách viết truy vấn con và sử dụng mệnh đề "Trong" trong Hive

Làm cách nào để sử dụng mục In trong Hive Tôi muốn viết một cái gì đó như thế này trong Hive chọn x từ y trong đó yz (chọn riêng z từ y) x; Nhưng tôi không tìm được cách nào để thực hiện nó .. Tôi đã

7Nhiệt

4Trả lời

Sử dụng FileFormat v Serde để đọc các tệp văn bản tùy chỉnh

Người mới sử dụng Hadoop/Hive tại đây. Tôi đang cố gắng sử dụng dữ liệu được lưu trữ theo định dạng dựa trên văn bản tùy chỉnh với Hive. Sự hiểu biết của tôi là bạn có thể viết một tùy chỉnh FileForma

8Nhiệt

4Trả lời

cách chuyển đổi thời gian epoch unix thành chuỗi ngày trong hive

Tôi có tệp nhật ký chứa cột dấu thời gian. Dấu thời gian ở định dạng thời gian nguyên bản. Tôi muốn tạo phân vùng dựa trên dấu thời gian có phân vùng năm, tháng và ngày. Cho đến nay tôi đã làm điều nà

10Nhiệt

2Trả lời

hive regexp_extract weirdness

Tôi gặp một số vấn đề với regexp_extract: tôi truy vấn trên một tập tin phân định theo tab cột Tôi đang kiểm tra có dây mà trông như thế này: abc.def.ghi Bây giờ, nếu tôi làm: công việc select disti