Làm cách nào để xây dựng mô hình 3D của một phòng từ 2 máy ảnh stereo? Yếu tố quyết định để xây dựng chính xác là gì?

Question

Hiện tại, tôi đã trích xuất các điểm sâu để xây dựng mô hình 3D từ 2 máy ảnh stereo. Các phương pháp tôi đã sử dụng là phương pháp graphCut openCV và một phần mềm từ http://sourceforge.net/projects/reconststereo/. Tuy nhiên, các mô hình 3D được tạo ra không phải là rất chính xác, dẫn tôi đến câu hỏi: 1) Vấn đề với phương pháp dựa trên pixel là gì? 2) Tôi có nên thay đổi phương pháp dựa trên pixel của mình thành phương pháp dựa trên tính năng hoặc dựa trên nhận dạng đối tượng không? Có phương pháp tốt nhất không? 3) Có cách nào khác để thực hiện việc tái thiết đó không?

Ngoài ra, độ sâu được trích xuất chỉ xuất phát từ 2 hình ảnh. Điều gì sẽ xảy ra nếu tôi quay camera 360 độ để có video? Mong muốn được gợi ý về cách kết hợp thông tin chuyên sâu này.

Thank you very much :)

Answer 1

gì nếu tôi quay camera 360 độ để có được một video?

Tôi nghĩ bạn có nghĩa là 180 độ. Nếu bạn bật cả hai máy ảnh (nghĩa là dàn âm thanh nổi) qua 180 độ thì sẽ ổn.

 V  V 
    [.]  [.] 

Turn the rig 180 degrees 

    [.]  [.] 
    ^ ^

Nhưng nếu cả hai máy ảnh đều 180 độ với nhau và vì không có sự chồng chéo nên bạn không thể làm gì cả.

 V 
    [.] 

    [.] 
    ^ 

Ngoài ra, đối với câu hỏi của bạn về dựa trên pixel so với dựa trên tính năng so với dựa trên nhận dạng đối tượng --- mục tiêu cuối cùng của bạn là gì?

Answer 2

Có phương pháp tốt nhất không?

Phương pháp tốt nhất là tự tạo mô hình. Yêu cầu vài tuần đào tạo với blender. Với một số máy ảnh độ phân giải cao, bạn có thể thực hiện một kết quả khá phong nha rất nhanh chóng. Bạn sẽ làm tốt hơn một máy tính.

Có cách nào khác để thực hiện việc xây dựng lại không?

Quét bằng laser. Google cho "máy quét laser tự chế" hoặc "máy quét 3d tự chế". Nhiều người đã cố gắng phát triển các hệ thống như vậy với nhiều thành công khác nhau. Bạn sẽ cần một dòng laser (có thể làm cho một từ con trỏ laser). Nhưng bạn sẽ không nhận được thông tin màu theo cách này - chỉ cứu trợ.

Điều gì sẽ xảy ra nếu tôi chuyển máy ảnh 360 độ để tải video?

Bạn không thể lấy thông tin chi tiết từ chỉ một máy ảnh ngay cả khi bạn xoay. Bạn cần thêm 2 hoặc nhiều hơn ảnh chồng chéo được lấy từ các điểm khác nhau. Hoặc bạn có thể thử đặt vật thể lên bàn quay (mặc dù vì bạn đang làm một căn phòng, điều đó là không thể).

Answer 3

Có dự án cho điều này trong Sourceforge: 3D Reconstruction

Answer 4

Vấn đề then chốt xác định tính chính xác của tái thiết stereo là ước tính chênh lệch. Khu vực này đã được nghiên cứu rộng rãi, nhưng các kết quả hiện đại được thu thập trên trang: http://vision.middlebury.edu/stereo/eval/ Tôi khuyên bạn nên chọn một trong những phương pháp hàng đầu. Có lẽ bạn sẽ cần phải thực hiện nó một mình (tham chiếu đến các giấy tờ ở dưới cùng của trang), hoặc cố gắng tìm một thực hiện trên trang chủ của các tác giả. Xem thêm http://vision.middlebury.edu/MRF/code/.

Bạn cũng nên cố gắng tìm ra lý do có độ chính xác thấp. Nó có thể không có khả năng của thuật toán để nắm bắt cấu trúc của một cảnh, hoặc chỉ độ phân giải thấp của một đầu ra. Trong trường hợp sau, bạn cần phải đi đến độ chính xác của pixel phụ. Số lượng các phương thức giải quyết vấn đề này. Sử dụng hộp kết hợp Lỗi Ngưỡng để xếp hạng các thuật toán theo độ chính xác mong muốn.

Nhiều máy ảnh cũng có thể trợ giúp. Từ khóa là "đa âm thanh nổi".