Herstellung HTTP HEAD-Anfrage mit urllib2 von Python 2

Question

Ich versuche, eine HEAD-Anforderung von einer Seite zu tun mit Python 2.

Ich versuche

import misc_urllib2 
..... 
opender = urllib2.build_opener([misc_urllib2.MyHTTPRedirectHandler(), misc_urllib2.HeadRequest()]) 

mit misc_urllib2.py

class HeadRequest(urllib2.Request): 
    def get_method(self): 
     return "HEAD" 


class MyHTTPRedirectHandler(urllib2.HTTPRedirectHandler): 
    def __init__ (self): 
     self.redirects = [] 

    def http_error_301(self, req, fp, code, msg, headers): 
     result = urllib2.HTTPRedirectHandler.http_error_301(
       self, req, fp, code, msg, headers) 
     result.redirect_code = code 
     return result 

    http_error_302 = http_error_303 = http_error_307 = http_error_301 

enthält

Aber ich bekomme

TypeError: __init__() takes at least 2 arguments (1 given) 

Wenn ich nur

opender = urllib2.build_opener(misc_urllib2.MyHTTPRedirectHandler()) 

dann funktioniert es gut

Answer 1

Dies funktioniert gut:

import urllib2 
request = urllib2.Request('http://localhost:8080') 
request.get_method = lambda : 'HEAD' 

response = urllib2.urlopen(request) 
print response.info() 

Getestet mit quick and dirty HTTPd in ​​Python gehackt:

Server: BaseHTTP/0.3 Python/2.6.6 
Date: Sun, 12 Dec 2010 11:52:33 GMT 
Content-type: text/html 
X-REQUEST_METHOD: HEAD 

ich eine benutzerdefinierte Header-Feld X-REQUEST_METHOD es funktioniert :)

Hier zu zeigen hinzugefügt haben ist HTTPd log:

Sun Dec 12 12:52:28 2010 Server Starts - localhost:8080 
localhost.localdomain - - [12/Dec/2010 12:52:33] "HEAD/HTTP/1.1" 200 - 

Edit: es gibt auch httplib2

import httplib2 
h = httplib2.Http() 
resp = h.request("http://www.google.com", 'HEAD') 

Answer 2

Versuchen httplib

>>> import httplib 
>>> conn = httplib.HTTPConnection("www.google.com") 
>>> conn.request("HEAD", "/index.html") 
>>> res = conn.getresponse() 
>>> print res.status, res.reason 
200 OK 
>>> print res.getheaders() 
[('content-length', '0'), ('expires', '-1'), ('server', 'gws'), ('cache-control', 'private, max-age=0'), ('date', 'Sat, 20 Sep 2008 06:43:36 GMT'), ('content-type', 'text/html; charset=ISO-8859-1')] 

Siehe How do you send a HEAD HTTP request in Python 2?

Answer 3

Das Problem liegt mit Ihrer Klasse HeadRequest, die von urllib2.Request erbt. Nach doc, urllib2.Request.__init__ Signatur ist

__init__(self, url, data=None, headers={}, origin_req_host=None, unverifiable=False) 

so müssen Sie eine URL-Argument, um es passieren. In Ihrem zweiten Versuch verwenden Sie HeadRequest einfach nicht, deshalb funktioniert es.

Answer 4

Sie shoud nicht HeadRequest-build_opener oder add_handler fügen Sie es wie diese

opener = urllib2.build_opener(MyHTTPRedirectHandler) 
response = opener.open(HeadRequest(url)) 
print response.getheaders()