hadoop

34Nhiệt

1Trả lời

Tại sao có hai gói riêng biệt MAP-giảm gói trong cây gói hadoop Apache: org.apache.hadoop.mapred http://javasourcecode.org/html/open-source/hadoop/hadoop-1.0.3/org/apache/hadoop/mapred/ org.apache.h

5Nhiệt

2Trả lời

Đối tượng bối cảnh Hadoop Mapper Đối tượng ngữ cảnh

Phương thức run() của lớp bản đồ hoặc bộ giảm tốc được gọi là khung công tác Hadoop như thế nào? Khuôn khổ đang gọi phương thức run(), nhưng nó đòi hỏi một đối tượng bối cảnh để Hadoop truyền đối tượn

5Nhiệt

1Trả lời

Hadoop MapReduce, câu hỏi triển khai Java

Hiện tại tôi đang sử dụng Apache Hadoop (với việc triển khai Java của các công việc MapReduce). Tôi đã xem xét một số ví dụ (ví dụ như ví dụ WordCount). Tôi đã thành công với việc chơi xung quanh việc

7Nhiệt

4Trả lời

Các truy vấn chậm của Hadoop Hive

Tôi mới sử dụng Hadoop Hive và tôi đang phát triển một giải pháp báo cáo. Vấn đề là hiệu năng truy vấn thực sự chậm (hive 0.10, hbase 0.94, hadoop 1.1.1). Một trong các truy vấn là: select a.*, b.coun

13Nhiệt

3Trả lời

Làm thế nào để tạo ra tổng số 100 triệu tweet của Rtm?

Tôi muốn tạo một kho văn bản 100 triệu tweet bằng gói tm tính toán phân tán của R (được gọi là tm.plugin.dc). Các tweets được lưu trữ trong một bảng MySQL lớn trên máy tính xách tay của tôi. Máy tính

5Nhiệt

1Trả lời

Không phải là Hadoop nhiều lưới hơn là một cụm sao?

Tôi đã nghe cụm từ "cụm Hadoop", nhưng có vẻ như trái ngược với những gì tôi hiểu về "lưới" và "cụm". My hiểu là một mạng lưới là một hệ thống phân phối gồm 2+ máy tính (nút) mà tất cả đều chia sẻ tài

12Nhiệt

1Trả lời

Apache Helix vs YARN

Sự khác nhau giữa Apache Helix và Hadoop YARN (MRv2) là gì. Có ai có kinh nghiệm với cả hai công nghệ? Ai đó có thể giải thích cho tôi những ưu điểm/nhược điểm của Helix trên YARN và tại sao các Linke

6Nhiệt

1Trả lời

Đầu ra hồ sơ Hadoop - ở đâu và cái gì?

Tôi đang cố gắng để hồ sơ ứng dụng của mình để xem liệu tôi có thể tái sản xuất this blogpost hay không. Tôi đã thêm -D mapred.task.profile = true vào dòng lệnh và được kiểm tra trong cấu hình công vi

11Nhiệt

2Trả lời

Làm thế nào để có được mảng/túi của các phần tử từ nhóm Hive bởi nhà điều hành?

Tôi muốn nhóm theo một trường nhất định và nhận đầu ra với các trường được nhóm. Dưới đây là một ví dụ về những gì tôi đang cố gắng để đạt được: - Hãy tưởng tượng một bảng có tên là 'sample_table' với

5Nhiệt

1Trả lời

Điều đó có nghĩa gì đối với Text.hashCode() & Interger.MAX_VALUE?

Gần đây, tôi đang đọc hướng dẫn dứt khoát về hadoop. Tôi đã hai câu hỏi: 1.Tôi thấy một đoạn mã của phân vùng một tùy chỉnh: public class KeyPartitioner extends Partitioner<TextPair, Text>{ @Ove