hdfs

6Nhiệt

2Trả lời

Chúng tôi có thể lưu trữ dữ liệu quan hệ trong hdfs

Tôi đang cố gắng chuyển đổi một ứng dụng có cơ sở dữ liệu quan hệ làm chương trình phụ trợ. Tôi có thể lưu trữ quan hệ dữ liệu trong HDFS không?

8Nhiệt

3Trả lời

Chạy công việc Map-Reduce trên các tệp/khối cụ thể trong HDFS

Trước tiên, tôi mới sử dụng hadoop :) Tôi có một tập dữ liệu lớn các tệp được nén (TB của tài liệu trong các tệp được nén xung quanh kích thước của 100-500mb mỗi cái). Về cơ bản, tôi cần một số loại l

5Nhiệt

1Trả lời

cách xóa nhật ký hadoop-hdfs trong/var/log/hadoop-hdfs

nút tên của tôi trong cụm Hadoop chuyển thành trạng thái xấu vì "Thư mục nhật ký của vai trò không phải là hệ thống tệp có ít hơn 4GB không gian trống ./var/log/hadoop-hdfs (miễn phí: 2,4 GB (11,12%),

7Nhiệt

1Trả lời

Viết các tệp bằng hdfs trong C++ (libhdfs)

Tôi đang cố gắng viết một giao diện trong C++ để ghi tệp bằng hdfs bằng cách sử dụng libhdfs.so. phiên bản đích hadoop tôi là 2.0.2-alpha Mã dưới đây hdfsFS fs = hdfsConnect("127.0.0.1",8020); if (!f

9Nhiệt

2Trả lời

kết nối hadoop bị từ chối trên cổng 9000

Tôi muốn thiết lập một cụm Hadoop trong chế độ phân tán giả để phát triển. Đang cố gắng để bắt đầu cụm Hadoop thất bại do kết nối từ chối trên cổng 9000. Đây là configs của tôi (khá chuẩn): trang web

20Nhiệt

4Trả lời

Chính xác những gì DFS không được sử dụng có nghĩa là gì?

Đây là những gì tôi thấy trên Web UI gần đây Configured Capacity : 232.5 GB DFS Used : 112.44 GB Non DFS Used : 119.46 GB DFS Remaining : 613.88 MB DFS Used% : 48.36 % DFS Remaining% : 0.26 %

14Nhiệt

2Trả lời

Pig: Nhận giá trị n hàng đầu cho mỗi nhóm

Tôi có dữ liệu đã nhóm lại và tổng hợp, có vẻ như vậy: user value count ---- -------- ------ Alice third 5 Alice first 11 Alice second 10 Alice fourth 2 ... Bob second 20 Bob third 18

8Nhiệt

4Trả lời

Nhân tố nhân rộng giảm HDFS

Tôi đã giảm hệ số nhân bản từ 3 xuống 1, nhưng không thấy bất kỳ hoạt động nào từ nút tên hoặc giữa các nút dữ liệu để loại bỏ các khối tệp HDFS quá sao chép. Có cách nào để theo dõi hoặc ép buộc công

75Nhiệt

6Trả lời

Cách sao chép tệp từ HDFS sang hệ thống tệp cục bộ

Cách sao chép tệp từ HDFS sang hệ thống tệp cục bộ. Không có vị trí vật lý của tệp trong tệp, thậm chí không phải thư mục. làm thế nào tôi có thể di chuyển chúng đến địa phương của tôi để xác nhận thê

101Nhiệt

4Trả lời

Sự khác biệt giữa HBase và Hadoop/HDFS

Đây là một câu hỏi ngây thơ nhưng tôi mới mẻ với mô hình NoSQL và không biết nhiều về nó. Vì vậy, nếu ai đó có thể giúp tôi hiểu rõ sự khác biệt giữa HBase và Hadoop hoặc nếu đưa ra một số gợi ý có th