Konvertieren von HTTP-Proxy zu HTTPS-Proxy in Twisted

Question

Kürzlich habe ich mit dem HTTP-Proxy in verdreht gespielt. Nach viel Versuch und Irrtum denke ich, dass ich endlich etwas arbeite. Was ich jedoch wissen möchte, ist, wie, wenn es möglich ist, erweitere ich diesen Proxy, um auch mit HTTPS-Seiten umgehen zu können? Hier ist, was ich bisher habe:

from twisted.internet import reactor 
from twisted.web import http 
from twisted.web.proxy import Proxy, ProxyRequest, ProxyClientFactory, ProxyClient 



class HTTPProxyClient(ProxyClient): 
    def handleHeader(self, key, value): 
     print "%s : %s" % (key, value) 
     ProxyClient.handleHeader(self, key, value) 

    def handleResponsePart(self, buffer): 
     print buffer 
     ProxyClient.handleResponsePart(self, buffer) 

class HTTPProxyFactory(ProxyClientFactory): 
    protocol = HTTPProxyClient 

class HTTPProxyRequest(ProxyRequest): 
    protocols = {'http' : HTTPProxyFactory} 

    def process(self): 
     print self.method 
     for k,v in self.requestHeaders.getAllRawHeaders(): 
      print "%s : %s" % (k,v) 
     print "\n \n" 

     ProxyRequest.process(self) 

class HTTPProxy(Proxy): 

    requestFactory = HTTPProxyRequest 


factory = http.HTTPFactory() 
factory.protocol = HTTPProxy 

reactor.listenSSL(8001, factory) 
reactor.run() 

Da dieser Code demonstriert, zum Wohle Beispiel für jetzt bin ich nur Druck aus, was durch die Verbindung geht. Ist es möglich, HTTPS mit den gleichen Klassen zu behandeln? Wenn nicht, wie sollte ich eine solche Sache umsetzen?

Answer 1

Wenn Sie eine Verbindung zu einer HTTPS-Website über einen HTTP-Proxy herstellen möchten, müssen Sie das HTTP-Verb CONNECT verwenden (weil so ein Proxy für HTTPS funktioniert). In diesem Fall verbindet sich der Proxy-Server einfach mit dem Zielserver und leitet alle vom Server gesendeten Daten zurück an den Socket des Clients (und umgekehrt). In diesem Fall ist kein Caching erforderlich (Sie können jedoch möglicherweise die Hosts protokollieren, mit denen Sie eine Verbindung herstellen).

Der Austausch wird so (Client-Proxy) aussehen:

C->P: CONNECT target.host:443 HTTP/1.0 
C->P: 

P->C: 200 OK 
P->C: 

Danach öffnet sich der Proxy einfach eine einfache Buchse an den Zielserver (keine HTTP oder SSL/TLS noch) und leitet alles zwischen der ursprüngliche Client und der Zielserver (einschließlich des TLS-Handshakes, den der Client initiiert). Der Client aktualisiert den vorhandenen Socket, den er für den Proxy hat, um TLS/SSL zu verwenden (indem er den SSL/TLS-Handshake startet). Sobald der Client die Statuszeile '200' gelesen hat, ist es für den Client so, als hätte er direkt die Verbindung zum Zielserver hergestellt.

Answer 2

Ich bin mir nicht sicher über verdreht, aber ich möchte Sie warnen, dass ein Webbrowser, wenn Sie einen HTTPS-Proxy implementieren, das SSL-Zertifikat des Servers mit dem Domänennamen in der URL (Adressleiste) erwarten. Der Webbrowser wird andernfalls Sicherheitswarnungen ausgeben.

Es gibt verschiedene Möglichkeiten, z. B. das Erstellen von Zertifikaten im laufenden Betrieb, aber Sie müssen das Stammzertifikat als vertrauenswürdig im Browser verwenden.