bigdata

6Nhiệt

2Trả lời

Tôi có một số tệp lớn, lớn mà tôi làm việc cùng và tôi sử dụng một số hàm I/O khác nhau để truy cập chúng. Phổ biến nhất là gói bigmemory. Khi ghi vào tệp, tôi đã học được cách khó để xóa bộ đệm đầu r

7Nhiệt

2Trả lời

Xử lý các danh sách Chuỗi lớn trong java

Tôi có một nhiệm vụ, nơi tôi đã phải trải qua vài tỷ dòng chuỗi và kiểm tra xem mỗi chuỗi có duy nhất hay không. Tất cả các dòng chính họ không thể được cung cấp trong bộ nhớ RAM của PC. Ngoài ra, số

8Nhiệt

4Trả lời

sắp xếp dữ liệu văn bản lớn

Tôi có một tệp lớn (100 triệu dòng giá trị được phân cách bằng tab - kích thước khoảng 1,5 GB). Cách nhanh nhất để sắp xếp điều này dựa trên một trong các trường là gì? Tôi đã thử hive. Tôi muốn xem n

7Nhiệt

1Trả lời

Chức năng cốt truyện của R (hoặc ggplot2) để ngăn việc vẽ các tập dữ liệu lớn

Thay vì hỏi cách vẽ các tập dữ liệu lớn, tôi muốn bọc plot sao cho mã tạo ra nhiều ô không bị đóng búa khi nó vẽ đồ vật lớn. Làm thế nào tôi có thể bọc plot với một cách rất đơn giản để tất cả các chứ

8Nhiệt

6Trả lời

Tôi cần biết gì về làm việc với cơ sở dữ liệu khổng lồ?

Tôi muốn biết những vấn đề/giải pháp/lời khuyên/thực tiễn tốt nhất cụ thể [không trừng phạt tôi vì từ] đang nảy sinh trong khi làm việc với các cơ sở dữ liệu khổng lồ. Tôi rất ngụ ý các cơ sở dữ liệu,

6Nhiệt

1Trả lời

Dữ liệu lớn chuyển thành "giao dịch" từ gói gói

Gói arules trong R sử dụng giao dịch của lớp. Vì vậy, để sử dụng chức năng apriori() Tôi cần phải chuyển đổi dữ liệu hiện có của mình. Tôi đã có Ma trận với 2 cột và khoảng 1.6mm hàng và cố gắng chuyể