Bắt gỡ lỗi tốt hơn khi Linux gặp sự cố trong một chương trình C

Question

Chúng tôi có phiên bản nhúng của nhân Linux chạy trên lõi MIP. Chương trình chúng tôi đã viết chạy một bộ thử nghiệm cụ thể. Trong một trong các bài kiểm tra căng thẳng (chạy trong khoảng 12 giờ), chúng tôi nhận được một lỗi seg. Điều này lần lượt tạo ra một bãi chứa lõi.

Rất tiếc, kết xuất lõi không phải là rất hữu ích. Sự cố là trong một số thư viện hệ thống được liên kết động (có thể là pthread hoặc glibc). Các vết lùi trong các bãi chứa lõi là không hữu ích vì nó chỉ cho thấy điểm vụ tai nạn và không có người gọi khác (ứng dụng không gian sử dụng của chúng tôi được xây dựng với -O0 -g, nhưng vẫn không có lại thông tin dấu vết):

Cannot access memory at address 0x2aab1004 
(gdb) bt 
#0 0x2ab05d18 in ??() 
warning: GDB can't find the start of the function at 0x2ab05d18. 

    GDB is unable to find the start of the function at 0x2ab05d18 
and thus can't determine the size of that function's stack frame. 
This means that GDB may be unable to access that stack frame, or 
the frames below it. 
    This problem is most likely caused by an invalid program counter or 
stack pointer. 
    However, if you think GDB should simply search farther back 
from 0x2ab05d18 for code which looks like the beginning of a 
function, you can increase the range of the search using the `set 
heuristic-fence-post' command. 

bất hạnh khác -ness là chúng ta không thể chạy gdb/gdbserver. gdb/gdbserver tiếp tục vi phạm trên __nptl_create_event. Thấy rằng các thử nghiệm tạo ra các chủ đề, giờ và phá hủy sau đó mỗi 5s nó gần như không thể ngồi trong một thời gian dài đánh tiếp tục trên chúng.

EDIT: Một lưu ý khác, backtrace và backtrace_symbols không được hỗ trợ trên chuỗi công cụ của chúng tôi.

Do đó:

1. Có một cách để bẫy lỗi seg và tạo dữ liệu vết lùi hơn, chồng con trỏ, gọi chồng, vv?

2. Có cách nào để nhận thêm dữ liệu từ một phân đoạn lõi bị lỗi trong tệp .so không?

Cảm ơn.

Answer 1

Nếu mọi thứ khác không chạy lệnh bằng trình gỡ lỗi!

Chỉ cần đặt "gdb" dưới dạng lệnh bắt đầu bình thường của bạn và nhập "c" ontinue để chạy quy trình. Khi nhiệm vụ segfaults nó sẽ trở về dấu nhắc gdb tương tác chứ không phải là kết xuất lõi. Sau đó, bạn sẽ có thể nhận được các dấu vết ngăn xếp có ý nghĩa hơn, v.v.

Một tùy chọn khác là sử dụng "giàn" nếu có. Điều này sẽ cho bạn biết các cuộc gọi hệ thống nào đang được sử dụng tại thời điểm diễn ra sự kiện.

Answer 2

GDB không thể tìm thấy sự khởi đầu của hàm tại 0x2ab05d18

gì là tại địa chỉ đó vào thời điểm vụ tai nạn?

Làm info shared và tìm hiểu xem thư viện có chứa địa chỉ đó không.

Nguyên nhân có thể gây ra rắc rối của bạn: bạn có chạy strip libpthread.so.0 trước khi tải lên mục tiêu của mình không? Không làm điều đó: GDB yêu cầu libpthread.so.0 đến không bị tước. Nếu chuỗi công cụ của bạn chứa libpthread.so.0 với các biểu tượng gỡ lỗi (và do đó quá lớn cho mục tiêu), hãy chạy strip -g trên đó, không phải là strip đầy đủ.

Cập nhật:

info shared sản xuất không thể truy cập vào bộ nhớ tại địa chỉ 0x2ab05d18

Điều này có nghĩa rằng GDB không thể truy cập danh sách thư viện chia sẻ (mà sau đó sẽ giải thích sự thiếu stack trace). Nguyên nhân thông thường nhất: nhị phân thực sự tạo ra core không khớp với nhị phân mà bạn đã cung cấp cho GDB. Nguyên nhân ít phổ biến hơn: kết xuất cốt lõi của bạn đã bị cắt bớt (có lẽ do ulimit -c được đặt quá thấp).