large-data

6Nhiệt

1Trả lời

có bất kỳ điểm chuẩn nào cho các vùng chứa dữ liệu lớn không?

Tôi hiện đang tìm cách xử lý tập dữ liệu lớn. có vẻ như giải pháp thường được đề xuất là stxxl, tuy nhiên tôi cần biết thêm về nó trước khi đưa ra quyết định. câu hỏi là là STXXL hoàn toàn nền tảng tr

5Nhiệt

1Trả lời

Phép lấy mẫu của [1,2,3, ..., N] cho lớn N

Tôi phải giải quyết the Travelling Salesman Problem sử dụng genetic algorithm mà tôi sẽ phải viết cho bài tập về nhà. Sự cố bao gồm 52 thành phố. Do đó, không gian tìm kiếm là 52!. Tôi cần phải lấy mẫ

6Nhiệt

3Trả lời

Lưu trữ số lượng lớn hình ảnh trên nhiều máy chủ

Tôi muốn biết giải pháp tốt nhất để lưu trữ số lượng lớn hình ảnh trên nhiều máy chủ như google, facebook là gì. Dường như việc lưu trữ trong hệ thống tập tin tốt hơn thì bên trong cơ sở dữ liệu nhưng

7Nhiệt

3Trả lời

Thư viện Java để lưu trữ và xử lý đồ thị lớn (lên tới 600k đỉnh)

Tôi đang làm việc trên một dự án liên quan đến các thuật toán đang chạy trên các biểu đồ lớn. Lớn nhất hai có khoảng 300k và 600k đỉnh (khá thưa thớt tôi nghĩ). Tôi hy vọng sẽ tìm thấy một thư viện ja

8Nhiệt

5Trả lời

chia nhỏ tệp văn bản csv dựa trên giá trị cột

Tôi có tệp CSV có nhiều cột được sắp xếp. Ví dụ: tôi có thể có các dòng như sau: 19980102,,PLXS,10032,Q,A,,,15.12500,15.00000,15.12500,2 19980105,,PLXS,10032,Q,A,,,14.93750,14.75000,14.93750,2 19980

5Nhiệt

1Trả lời

sử dụng RavenDB để chèn số lượng lớn dữ liệu

Tôi đang cố gắng nhập một lượng lớn dữ liệu (luồng Twitter vào khoảng 20-25 tweet một giây) vào RavenDB để kiểm tra và thử nghiệm dữ liệu quy mô lớn. Tôi có một số mã được ghi dữ liệu khá tốt, nhưng s

49Nhiệt

4Trả lời

Điều gì gây ra lỗi phân đoạn Python?

Tôi đang triển khai thuật toán tìm kiếm đồ thị của Thành phần Kết nối Mạnh mẽ (SCC) của Kosaraju bằng Python. Chương trình chạy rất tốt trên tập dữ liệu nhỏ, nhưng khi tôi chạy nó trên biểu đồ siêu lớ

8Nhiệt

3Trả lời

Tôi nên sử dụng cấu trúc dữ liệu nào cho mã hóa địa lý?

Tôi đang cố gắng tạo một tập lệnh Python sẽ lấy địa chỉ làm đầu vào và sẽ nhổ ra vĩ độ và kinh độ của nó, hoặc vĩ độ và kinh độ trong trường hợp có nhiều kết quả khớp, giống như Nominatim. Vì vậy, đầu

7Nhiệt

1Trả lời

Lỗi tràn ngăn xếp bảo vệ fread

Tôi đang sử dụng fread trong data.table (1.8.8, R 3.0.1) trong một nỗ lực để đọc các tệp rất lớn. Tệp trong câu hỏi có 313 hàng và ~ 6.6 triệu cols hàng dữ liệu số và tệp có kích thước khoảng 12gb. Đâ

15Nhiệt

1Trả lời

Tách tệp lớn theo giá trị trong một cột (AWK)

Tôi muốn chia nhỏ tệp lớn (10^6 hàng) theo giá trị trong cột 6 (khoảng 10 * 10^3 giá trị duy nhất). Tuy nhiên, tôi không thể làm cho nó hoạt động vì số lượng hồ sơ. Nó sẽ được dễ dàng, nhưng nó đã mất