Abrufen des Inhalts der URL als Zeichenfolge

Question

Aus mühsamen Gründen mit Hpricot zu schreiben, muss ich eine Funktion schreiben, die eine URL übergeben wird, und den gesamten Inhalt der Seite als eine einzelne Zeichenfolge zurückgibt.

Ich bin nah dran. Ich weiß, ich brauche openURI zu verwenden, und es sollte wie folgt aussehen:

require 'open-uri' 
open(url) { 
    # do something mysterious here to get page_string 
} 
puts page_string 

Kann jemand empfehlen, was ich hinzufügen müssen?

Answer 1

Die open Methode übergibt eine IO Darstellung der Ressource auf dem Block, wenn es Erträge. Sie können es lesen Sie die IO#read Methode

open([mode [, perm]] [, options]) [{|io| ... }] 
open(path) { |io| data = io.read } 

Answer 2

require 'open-uri' 
open(url) do |f| 
    page_string = f.read 
end 

Siehe auch die Dokumentation von IO class

Answer 3

Sie können ohne openURI das Gleiche tun:

require 'net/http' 
require 'uri' 

def open(url) 
    Net::HTTP.get(URI.parse(url)) 
end 

page_content = open('http://www.google.com') 
puts page_content 

Answer 4

require 'open-uri' 
open(url) {|f| #url must specify the protocol 
str = f.read() 
} 

Answer 5

Um Code ein wenig klarer, wird die openURI open Methode den Wert durch den Block zurück zurückkehren, so können Sie open ‚s Rückgabewert auf Ihre Variablen zuweisen. Zum Beispiel:

xml_text = open(url) { |io| io.read } 

Answer 6

Ich war auch sehr verwirrt, was für bessere Leistung und schnelle Ergebnisse zu verwenden. Ich lief für beide eine Benchmark, um es klar:

require 'benchmark' 
require 'net/http' 
require "uri" 
require 'open-uri' 

url = "http://www.google.com" 
Benchmark.bm do |x| 
    x.report("net-http:") { content = Net::HTTP.get_response(URI.parse(url)).body if url } 
    x.report("open-uri:") { open(url){|f| content = f.read } if url } 
end 

Das Ergebnis ist:

   user  system  total  real 
net-http: 0.000000 0.000000 0.000000 ( 0.097779) 
open-uri: 0.030000 0.010000 0.040000 ( 0.864526) 

Ich mag würde sagen, dass es hängt davon ab, was Ihre Anforderung ist, und wie Sie bearbeiten möchten .

Answer 7

die stattdessen folgenden Versuchen:

require 'open-uri' 
content = URI(your_url).read