Récupérer le contenu de l'URL sous forme de chaîne

Question

Pour des raisons fastidieuses liées à Hpricot, j'ai besoin d'écrire une fonction qui est passée à une URL, et retourne tout le contenu de la page en une seule chaîne.

Je suis proche. Je sais que je dois utiliser openURI, et il devrait ressembler à ceci:

require 'open-uri' 
open(url) { 
    # do something mysterious here to get page_string 
} 
puts page_string 

Quelqu'un peut-il suggérer ce que je dois ajouter?

Answer 1

La méthode open passe une représentation IO de la ressource à votre bloc quand il rendements. Vous pouvez lire en utilisant la méthode IO#read

open([mode [, perm]] [, options]) [{|io| ... }] 
open(path) { |io| data = io.read } 

Answer 2

require 'open-uri' 
open(url) do |f| 
    page_string = f.read 
end 

Voir aussi la documentation de IO class

Answer 3

Vous pouvez faire la même chose sans openURI:

require 'net/http' 
require 'uri' 

def open(url) 
    Net::HTTP.get(URI.parse(url)) 
end 

page_content = open('http://www.google.com') 
puts page_content 

Answer 4

require 'open-uri' 
open(url) {|f| #url must specify the protocol 
str = f.read() 
} 

Answer 5

Pour rendre le code un peu plus clair, la méthode openURI open retourne la valeur retournée par le bloc, de sorte que vous pouvez attribuer une valeur de retour de open à votre variable. Par exemple:

xml_text = open(url) { |io| io.read } 

Answer 6

J'ai également été très confus ce qu'il faut utiliser pour de meilleures performances et des résultats rapides. J'ai couru une référence à la fois pour le rendre plus clair:

require 'benchmark' 
require 'net/http' 
require "uri" 
require 'open-uri' 

url = "http://www.google.com" 
Benchmark.bm do |x| 
    x.report("net-http:") { content = Net::HTTP.get_response(URI.parse(url)).body if url } 
    x.report("open-uri:") { open(url){|f| content = f.read } if url } 
end 

Son résultat est:

   user  system  total  real 
net-http: 0.000000 0.000000 0.000000 ( 0.097779) 
open-uri: 0.030000 0.010000 0.040000 ( 0.864526) 

Je voudrais dire que cela dépend de ce que vos besoins et comment vous voulez traiter .

Answer 7

Effectuez les opérations suivantes au lieu:

require 'open-uri' 
content = URI(your_url).read