tokenize

7Nhiệt

2Trả lời

Điều tôi muốn làm là thực hiện truy vấn và nhận lại kết quả không phân biệt chữ hoa chữ thường và khớp với các từ một phần từ chỉ mục. Tôi có một lược đồ Solr được thiết lập tại thời điểm đã được sửa

9Nhiệt

4Trả lời

Mã thông báo truy vấn tìm kiếm giống như Google và tách chuỗi

Tôi đang tìm cách mã thông báo truy vấn tìm kiếm tương tự như cách Google thực hiện. Ví dụ, nếu tôi có các truy vấn tìm kiếm sau: the quick "brown fox" jumps over the "lazy dog" Tôi muốn có một mảng

16Nhiệt

2Trả lời

Từ ngắt bằng ngôn ngữ không có dấu cách giữa các từ (ví dụ: Châu Á)?

Tôi muốn làm cho công cụ tìm kiếm văn bản đầy đủ của MySQL có văn bản tiếng Nhật và tiếng Trung, cũng như bất kỳ ngôn ngữ nào khác. Vấn đề là những ngôn ngữ này và có lẽ những ngôn ngữ khác thường khô

22Nhiệt

5Trả lời

Có công cụ tốt hơn (hiện đại hơn lex/flex) để tạo trình mã thông báo cho C++ không?

Tôi đã thêm tệp nguồn phân tích gần đây vào một công cụ hiện có đã tạo tệp đầu ra từ các đối số dòng lệnh phức tạp. Các đối số dòng lệnh trở nên phức tạp đến mức chúng tôi bắt đầu cho phép chúng được

7Nhiệt

5Trả lời

cách chuyển đổi csv thành bảng trong oracle

Làm cách nào để tạo gói trả về kết quả ở định dạng bảng khi được chuyển trong giá trị csv. select * from table(schema.mypackage.myfunction('one, two, three')) nên trở one two three tôi đã cố gắn

35Nhiệt

5Trả lời

Trình phân tích cú pháp (ví dụ: HTML) hoạt động như thế nào?

Vì lợi ích của đối số cho phép giả sử trình phân tích cú pháp HTML. Tôi đã đọc rằng nó mã thông báo mọi thứ trước tiên và sau đó phân tích cú pháp. tokenize có nghĩa là gì? Trình phân tích cú pháp có

9Nhiệt

4Trả lời

Có điều gì giống như PPI hay Perl :: Critic for C?

PPI và Perl::Critic cho phép các lập trình viên phát hiện một số thứ nhất định trong cú pháp của các chương trình Perl của họ. Có điều gì giống như nó sẽ mã hóa/phân tích cú pháp C và cho bạn cơ hội v

6Nhiệt

5Trả lời

Mã hóa các bài đăng trên Twitter trong Lucene

Câu hỏi của tôi tóm lại: Có ai biết một số TwitterAnalyzer hoặc TwitterTokenizer cho Lucene? phiên bản chi tiết hơn: Tôi muốn đánh chỉ mục một số tweets trong Lucene và giữ các điều khoản như @user ho

18Nhiệt

4Trả lời

Tokenizer, Stop Word Removal, bắt nguồn từ Java

Tôi đang tìm một lớp hoặc phương thức cần một chuỗi dài gồm 100 từ và mã thông báo, loại bỏ các từ dừng và xuất phát để sử dụng trong hệ thống IR. Ví dụ: "Con mèo lớn chất béo, cho biết 'hài hước chàn

17Nhiệt

7Trả lời

Tokenizer cho toàn văn

Đây phải là một trường hợp lý tưởng để không tái phát minh ra bánh xe, nhưng cho đến nay tìm kiếm của tôi đã vô ích. Thay vì viết một bản thân mình, tôi muốn sử dụng trình mã thông báo C++ hiện có. Mã