Ghi đè urllib2.HTTPError hoặc urllib.error.HTTPError và phản hồi đọc HTML anyway

Question

Tôi nhận được phản hồi 'Lỗi HTTP 500: Lỗi Máy chủ Nội bộ', nhưng tôi vẫn muốn đọc dữ liệu bên trong HTML lỗi.

Với Python 2.6, tôi thường lấy một trang sử dụng:

import urllib2 
url = "http://google.com" 
data = urllib2.urlopen(url) 
data = data.read() 

Khi cố gắng sử dụng này trên URL không, tôi nhận được ngoại lệ urllib2.HTTPError:

urllib2.HTTPError: HTTP Error 500: Internal Server Error 

Làm thế nào tôi có thể lấy ví dụ trang lỗi (có hoặc không có urllib2), tất cả trong khi chúng đang trả về Lỗi Máy chủ Nội bộ?

Lưu ý rằng với Python 3, ngoại lệ tương ứng là urllib.error.HTTPError.

Answer 1

HTTPErroris a file-like object. Bạn có thể nắm bắt nó và sau đó read nội dung của nó.

try: 
    resp = urllib2.urlopen(url) 
    contents = resp.read() 
except urllib2.HTTPError, error: 
    contents = error.read() 

Answer 2

Nếu bạn có nghĩa là bạn muốn đọc nội dung của 500:

request = urllib2.Request(url, data, headers) 
try: 
     resp = urllib2.urlopen(request) 
     print resp.read() 
except urllib2.HTTPError, error: 
     print "ERROR: ", error.read() 

Trong trường hợp của bạn, bạn không cần phải xây dựng theo yêu cầu. Chỉ cần làm

try: 
     resp = urllib2.urlopen(url) 
     print resp.read() 
except urllib2.HTTPError, error: 
     print "ERROR: ", error.read() 

vì vậy, bạn không ghi đè lên urllib2.HTTPError, bạn chỉ xử lý ngoại lệ.

Answer 3

alist=['http://someurl.com'] 

def testUrl(): 
    errList=[] 
    for URL in alist: 
     try: 
      urllib2.urlopen(URL) 
     except urllib2.URLError, err: 
      (err.reason != 200) 
      errList.append(URL+" "+str(err.reason)) 
      return URL+" "+str(err.reason) 
    return "".join(errList) 

testUrl()