web-scraping

14Nhiệt

5Trả lời

Nhấp vào cửa sổ bật lên javascript qua webdriver

Tôi đang xoá một trang web bằng cách sử dụng trình quản trị web Selenium trong Python Trang web tôi đang làm việc, có biểu mẫu. Tôi có thể điền vào biểu mẫu và sau đó tôi nhấp vào nút Gửi. Tạo cửa sổ

14Nhiệt

4Trả lời

Lấy phần tử thứ n bằng cách sử dụng BeautifulSoup

Từ một bảng lớn, tôi muốn đọc các hàng 5, 10, 15, 20 ... bằng cách sử dụng BeautifulSoup. Làm thế nào để tôi làm điều này? Là findNextSibling và tăng truy cập một cách để đi?

12Nhiệt

2Trả lời

Làm cách nào để tôi có thể xóa các trang web yêu cầu xác thực bằng cách sử dụng node.js?

Tôi đã gặp rất nhiều tutorials explaining how to scrape public websites that don't require authentication/login, sử dụng node.js. Ai đó có thể giải thích cách xóa các trang web yêu cầu đăng nhập bằng

18Nhiệt

2Trả lời

Python làm theo các chuyển hướng và sau đó tải xuống trang?

Tôi có tập lệnh python sau và nó hoạt động rất đẹp. import urllib2 url = 'http://abc.com' # write the url here usock = urllib2.urlopen(url) data = usock.read() usock.close() print data tuy n

5Nhiệt

2Trả lời

scrapy python dường như không nhận dữ liệu từ tất cả các URL có sẵn

Tôi đang cố gắng để cạo thesession.org để tạo bảng bao nhiêu lần mỗi giai điệu đã được thêm vào bộ ghi âm của memeber để tôi có thể tìm thấy một số phần phổ biến cần tìm hiểu. Tôi đã bắt đầu với hướng

27Nhiệt

6Trả lời

Làm cách nào để gọi hàm Javascript từ Python?

Tôi đang làm việc trên dự án cào web. Một trong những trang web tôi đang làm việc với dữ liệu đến từ Javascript. Có đề xuất về one of my earlier questions rằng tôi có thể trực tiếp gọi Javascript từ P

5Nhiệt

1Trả lời

In văn bản HTML của một webelement selen trong Python

Tôi đang sử dụng trình quản trị web Selenium trong Python cho một dự án tìm kiếm trên web. Làm cách nào để in văn bản HTML của selenium.WebElement? Tôi định sử dụng BeautifulSoup để phân tích cú pháp

15Nhiệt

7Trả lời

Làm cách nào để kết nối qua HTTPS bằng Jsoup?

Nó làm việc tốt qua HTTP, nhưng khi tôi cố gắng và sử dụng một nguồn HTTPS nó ném ngoại lệ sau đây: 10-12 13:22:11.169: WARN/System.err(332): javax.net.ssl.SSLHandshakeException: java.security.cert.Ce

11Nhiệt

3Trả lời

Gửi dữ liệu qua biểu mẫu web và trích xuất kết quả

Mức python của tôi là Novice. Tôi chưa bao giờ viết trình thu thập dữ liệu web hoặc trình thu thập thông tin. Tôi đã viết một mã python để kết nối với một api và trích xuất dữ liệu mà tôi muốn. Nhưng

68Nhiệt

6Trả lời

Selenium - Python - giá trị tùy chọn menu thả xuống

Tôi cần phải chọn một phần tử từ trình đơn thả xuống. Ví dụ, mở này: <select id="fruits01" class="select" name="fruits"> <option value="0">Choose your fruits:</option> <option value="1">Bana