Python urllib2 Tiêu đề phản hồi

Question

Tôi đang cố trích xuất tiêu đề phản hồi của yêu cầu URL. Khi tôi sử dụng firebug để phân tích sản lượng đáp ứng được yêu cầu URL, nó sẽ trả về:

Content-Type text/html 

Tuy nhiên khi tôi sử dụng mã python:

urllib2.urlopen(URL).info() 

kết quả lợi nhuận đầu ra:

Content-Type: video/x-flv 

Tôi mới dùng python và lập trình web nói chung; bất kỳ thông tin chi tiết hữu ích nào được đánh giá cao. Ngoài ra, nếu cần thêm thông tin, vui lòng cho tôi biết.

Cảm ơn trước vì đã đọc bài này

Answer 1

khác biệt đặc biệt này có thể được giải thích bởi tiêu đề khác nhau (có thể những người thân của các loại chấp nhận) được gửi đi bởi hai yêu cầu - bạn có thể kiểm tra điều đó ...? Hoặc, nếu Javascript đang chạy trong Firefox (mà tôi giả sử bạn đang sử dụng khi bạn đang chạy firebug?) - vì nó chắc chắn không chạy trong trường hợp Python - "tất cả các cược được tắt", như họ nói ;-) .

Answer 2

Content-Type text/html

Thực sự, như vậy, nếu không có sự thư đại tràng?

Nếu có, điều đó có thể giải thích: đó là tiêu đề không hợp lệ, do đó, nó bị bỏ qua, do đó, urllib đoán loại nội dung thay vì bằng cách xem tên tệp. Nếu URL xảy ra có ‘.flv’ ở cuối, nó sẽ đoán loại phải là video/x-flv.

Answer 3

Hãy nhớ rằng máy chủ web có thể trả về các kết quả khác nhau cho cùng một URL dựa trên sự khác biệt trong yêu cầu. Ví dụ, thương lượng kiểu nội dung: người yêu cầu có thể chỉ định danh sách các kiểu nội dung mà nó sẽ chấp nhận và máy chủ có thể trả về các kết quả khác nhau để cố gắng đáp ứng các nhu cầu khác nhau.

Ngoài ra, bạn có thể gặp trang lỗi cho một trong các yêu cầu của mình, ví dụ: vì trang không đúng định dạng hoặc bạn chưa đặt cookie xác thực chính xác, v.v. Hãy xem chính phản hồi để xem nội dung nào bạn đang lấy.

Answer 4

Hãy thử yêu cầu bằng Firefox. Bạn có thể xem tiêu đề yêu cầu trong Firebug, vì vậy thêm chúng vào đối tượng yêu cầu của bạn:

import urllib2 

request = urllib2.Request('http://your.tld/...') 
request.add_header('User-Agent', 'some fake agent string') 
request.add_header('Referer', 'fake referrer') 
... 
response = urllib2.urlopen(request) 
# check content type: 
print response.info().getheader('Content-Type') 

Ngoài ra còn có HTTPCookieProcessor mà có thể làm cho nó tốt hơn, nhưng tôi không nghĩ rằng bạn sẽ cần nó trong hầu hết các trường hợp. Hãy nhìn vào tài liệu của python:

http://docs.python.org/library/urllib2.html

Answer 5

Theo http://docs.python.org/library/urllib2.html chỉ có get_header() phương pháp và không có gì về getheader.

Hỏi bởi vì mã của bạn hoạt động tốt cho

response.info().getheader('Set cookie') 

nhưng một khi tôi thực hiện

response.info().get_header('Set cookie') 

tôi nhận được:

Traceback (most recent call last): 
    File "baza.py", line 11, in <module> 
    cookie = response.info().get_header('Set-Cookie') 
AttributeError: HTTPMessage instance has no attribute 'get_header' 

chỉnh sửa: Hơn nữa
response.headers.get('Set-Cookie') hoạt động tốt cũng chứ không phải đàn ông cập ở trong doc urlib2 ....

Answer 6

nhập khẩu urllib.request

fhand = urllib.request.urlopen ('http://data.pr4e.org/intro-short.txt')

in (fhand.info())