Loại bỏ sự sao chép mã trong một tệp đơn

Question

Đáng buồn thay, một dự án mà tôi đã làm gần đây có một lượng lớn mã sao chép và dán, ngay cả trong các tệp đơn lẻ. Có bất kỳ công cụ hoặc kỹ thuật nào có thể phát hiện trùng lặp hoặc gần trùng lặp trong một tệp không? Tôi có Beyond Compare 3 và nó hoạt động tốt để so sánh các tệp riêng biệt, nhưng tôi thua lỗ khi so sánh các tệp đơn lẻ.

Xin cảm ơn trước.

Edit:

Cảm ơn tất cả những công cụ tuyệt vời! Tôi chắc chắn sẽ kiểm tra chúng.

Dự án này là dự án ASP.NET/C#, nhưng tôi làm việc với nhiều ngôn ngữ bao gồm Java; Tôi quan tâm đến những công cụ nào là tốt nhất (cho bất kỳ ngôn ngữ nào) để loại bỏ trùng lặp.

Answer 1

Nếu bạn đang sử dụng Eclipse, bạn có thể sử dụng trình phát hiện sao chép dán (CPD) https://olex.openlogic.com/packages/cpd.

Answer 2

Resharper thực hiện điều này automagically - nó cho thấy khi nó nghĩ rằng mã nên được tách ra thành một phương pháp, và sẽ làm quá trình chiết cho bạn

Answer 3

Check-out Atomiq. Nó tìm thấy mã trùng lặp là số nguyên tố để trích xuất đến một vị trí.

http://www.getatomiq.com/

Answer 4

Check-out PMD, một khi bạn đã cấu hình nó (đó là chút đơn giản), bạn có thể chạy nó copy paste detector để tìm mã trùng lặp.

Answer 5

Xem SD CloneDR, một công cụ để phát hiện mã sao chép-dán-chỉnh sửa bên trong và trên nhiều tệp. Nó phát hiện các bản sao chính xác, các bản sao đã được định dạng lại và các bản sao gần như bỏ lỡ với các số nhận dạng, chữ khác nhau và thậm chí các câu lệnh khác nhau.

CloneDR xử lý nhiều ngôn ngữ, bao gồm Java (1,4,1,5,1,6) và C# đặc biệt là lên tới C# 4.0. Bạn có thể xem các báo cáo phát hiện bản sao mẫu tại trang web, cũng bao gồm một báo cáo cho C#.

Answer 6

Bạn không nói ngôn ngữ bạn đang sử dụng, điều này sẽ ảnh hưởng đến những công cụ bạn có thể sử dụng.

Đối với Python có CloneDigger. Nó cũng hỗ trợ Java nhưng tôi đã không thử điều đó. Nó có thể tìm thấy sự sao chép mã cả với một tệp duy nhất và giữa các tệp và cung cấp cho bạn kết quả dưới dạng một báo cáo tương tự trong HTML.

Answer 7

Một với một số kỹ năng văn phòng có thể làm theo trình tự sau trong 1 phút:

• sử dụng định dạng thông thường để thống nhất phong cách mã, tốt nhất là không có dòng gói
• nuôi văn bản mã vào Microsoft Excel là một cột duy nhất
• tìm kiếm và thay thế tất cả các không gian kép với một single và làm thay thế khác
• loại cột

Tại thời điểm này, từ khóa cho các từ khóa trùng lặp sẽ được phát hiện tốt.Nhưng để đi xa hơn

• add so sánh công thức để cột thứ 2 và ngược lại 3
• sao chép và dán giá trị một lần nữa, sắp xếp và nhìn thấy những dòng lặp đi lặp lại nhất

Answer 8

Có một công cụ phân tích, được gọi là Simian mà tôi chưa thử. Giả sử nó có thể chạy trên bất kỳ loại văn bản nào và chỉ ra các mục trùng lặp. Nó có thể được sử dụng thông qua giao diện dòng lệnh.

Answer 9

Một tùy chọn khác tương tự như trên, nhưng với một chuỗi công cụ khác: https://www.npmjs.com/package/jscpd