flume

18Nhiệt

3Trả lời

Thư viện trưởng thành nhất để xây dựng Đường ống Analytics trong Java/Scala cho Hadoop là gì?

Tôi đã tìm thấy nhiều tùy chọn gần đây và thú vị trong việc so sánh các tùy chọn của chúng một cách thận trọng trước sự trưởng thành và ổn định. Crunch - https://github.com/cloudera/crunch nhai - http

6Nhiệt

1Trả lời

Làm cách nào để nhận nhật ký được thu thập trên bảng điều khiển bằng Flume NG?

Tôi đang thử nghiệm Flume NG (1.2.0) để thu thập nhật ký. Đó là một thử nghiệm đơn giản mà Flume thu thập một tệp nhật ký flume_test.log và in các bản ghi được thu thập vào bảng điều khiển dưới dạng s

5Nhiệt

1Trả lời

Có thể apache flume hdfs sink chấp nhận đường dẫn động để viết?

Tôi mới đến apache flume. Tôi đang cố gắng để xem làm thế nào tôi có thể nhận được một json (như http nguồn), phân tích nó và lưu nó vào một đường dẫn động trên hdfs theo nội dung. Ví dụ: nếu json là:

5Nhiệt

2Trả lời

Lấy dấu thời gian từ hàng cơ sở

Sử dụng API Hbase (Nhận/Đặt) hoặc API HBQL, có thể truy xuất dấu thời gian của một cột cụ thể không?

16Nhiệt

1Trả lời

flume vs kafka vs others

Có thể câu hỏi này đã được hỏi trước nhưng tôi nghĩ tốt hơn là nên cân nhắc lại ngày hôm nay vì các công nghệ này đã trưởng thành. Chúng tôi đang tìm cách sử dụng một trong các mánh lới, kafka, scribe

9Nhiệt

4Trả lời

Làm thế nào để cài đặt và cấu hình apache flume?

Có gì mới trong Apache Flume. Tôi cần phải cài đặt các flume trên đầu trang của môi trường cụm HDFS. Tôi đã làm Google nó, tất cả đang nói bằng cách sử dụng phân phối cloudera nhưng tôi cần phải cài đ

5Nhiệt

1Trả lời

Khả năng mở rộng tự động Flume và chuyển đổi dự phòng

Công ty của tôi đang cân nhắc việc sử dụng phương thức xử lý nhật ký khối lượng khá cao. Chúng tôi tin rằng việc xử lý nhật ký cần phải được phân phối, cả về khối lượng (khả năng mở rộng) và các lý do