mechanize

5Nhiệt

3Trả lời

Làm thế nào để gửi JavaScript và Cookies được kích hoạt trong Scrapy?

Tôi đang cạo một trang web sử dụng Scrapy yêu cầu phải bật chế độ nấu ăn và tập lệnh java. Tôi không nghĩ rằng tôi sẽ phải thực sự xử lý javascript. Tất cả những gì tôi cần là giả vờ như javascript đư

5Nhiệt

2Trả lời

Ruby Mechanize Zlib :: BufError

Không chắc chắn tại sao tôi nhận được lỗi này ngay bây giờ với đá quý Mechanize - được sử dụng nó trong một thời bây giờ không có vấn đề. kịch bản của tôi sẽ ngẫu nhiên dừng lại và ném các lỗi sau: /U

11Nhiệt

2Trả lời

Phát hiện chuyển hướng bằng cơ chế ruby

Tôi đang sử dụng đá quý cơ giới hóa/nokogiri để phân tích một số trang ngẫu nhiên. Tôi đang gặp sự cố với chuyển hướng 301/302. Dưới đây là một đoạn mã: agent = Mechanize.new page = agent.get('http:/

5Nhiệt

1Trả lời

Làm cách nào để truy cập các phương thức được xác thực API StackExchange từ tập lệnh perl?

Tôi đang sử dụng WWW :: Cơ giới hóa. Đối với các phương pháp mà không yêu cầu xác thực, tôi nhận được những người như tôi sẽ bất kỳ url khác, và sau đó sử dụng perl mô-đun JSON để phân tích ra bất kỳ

6Nhiệt

1Trả lời

Lưu hình ảnh bằng Cơ chế và Nokogiri?

Tôi đang sử dụng Mechanize và Nokogiri để thu thập một số dữ liệu. Tôi cần lưu một bức ảnh được tạo ngẫu nhiên theo từng yêu cầu. Trong nỗ lực của mình, tôi buộc phải tải xuống tất cả các hình ảnh, nh

7Nhiệt

1Trả lời

Dò web bằng Lược đồ

Có một thư viện/gói tốt để thực hiện việc cào web bằng cách sử dụng Đề án (tốt nhất là Racket) không? ví dụ: một Đề án tương đương với mechanize?

9Nhiệt

2Trả lời

Cookie phiên đăng nhập cửa hàng trong trình duyệt bằng cách sử dụng cơ chế ruby

Tôi đang cố gắng đăng nhập vào một trang web và chuyển hướng đến một trang được bảo mật từ hành động đường ray. Mã của tôi trông giống như thế này. def redirect_to_external agent = Mechanize.new

68Nhiệt

4Trả lời

thêm thư mục vào sys.path/PYTHONPATH

Tôi đang cố gắng nhập một mô-đun từ một thư mục cụ thể. Vấn đề là nếu tôi sử dụng sys.path.append(mod_directory) để nối thêm đường dẫn và sau đó mở trình thông dịch python, thư mục mod_directory sẽ đư

9Nhiệt

2Trả lời

Làm cách nào để chuyển đổi liên kết tương đối trong Cơ chế thành Cơ chế tuyệt đối?

Có cách nào để chuyển đổi một cơ chế liên kết đối tượng liên kết với một đối tượng khác có chứa URL tuyệt đối. Cơ chế phải biết liên kết tuyệt đối, vì tôi có thể gọi phương thức click trên các liên kế

6Nhiệt

4Trả lời

Cạo dữ liệu từ Facebook bằng Python

Tôi đã cố gắng vài ngày nay (không thành công) để xóa thành phố khỏi khoảng 500 URL Facebook. Tuy nhiên, Facebook xử lý dữ liệu của nó một cách rất lạ và tôi không thể tìm ra những gì đang xảy ra dưới