Accéder au contenu d'une page Web avec C#

Question

J'essaie d'utiliser C# pour accéder au contenu d'une page Web. Par exemple, je veux saisir le texte du corps de la page d'accueil google.

Je sais que c'est faisable en C# avec son contrôle de navigateur web. Mais je ne pouvais pas trouver un bon exemple simple de le faire. Toutes les ressources que j'ai trouvées en ligne impliquent la création de formulaires et de GUI, dont je n'ai pas besoin, j'ai juste besoin d'une bonne vieille console.

Si quelqu'un peut fournir un simple extrait de code basé sur la console qui accomplit ce qui précède, il sera grandement apprécié.

Answer 1

En fait, le WebBrowser est un contrôle GUI utilisé dans le cas où vous souhaitez visualiser une page Web (intégrer et gérer Internet Explorer dans votre application Windows). Si vous avez juste besoin d'obtenir le contenu d'une page Web, vous pouvez utiliser la classe WebClient:

class Program 
{ 
    static void Main(string[] args) 
    { 
     using (var client = new WebClient()) 
     { 
      var contents = client.DownloadString("http://www.google.com"); 
      Console.WriteLine(contents); 
     } 
    } 
} 

Answer 2

Si vous voulez juste le contenu et non un navigateur réel, vous pouvez utiliser un HttpWebRequest.

Voici un exemple de code: http://www.c-sharpcorner.com/Forums/ShowMessages.aspx?ThreadID=58261

Answer 3

Le HTML Agility Pack peut-être ce dont vous avez besoin. Il donne accès aux pages HTML via DOM et XPath.

Answer 4

Vous pouvez faire quelque chose comme ceci:

Uri u = new Uri(@"http://launcher.worldofwarcraft.com/alert"); 
HttpWebRequest req = (HttpWebRequest)WebRequest.Create(u); 
HttpWebResponse res = (HttpWebResponse)req.GetResponse(); 
System.IO.Stream st = res.GetResponseStream(); 
System.IO.StreamReader sr = new System.IO.StreamReader(st); 
string body = sr.ReadToEnd(); 
System.Console.WriteLine("{0}", body); 

le code ci-dessus montre le message de maintenance pour WoW USA (si un message a été posté)

Answer 5

Vous pouvez également utiliser la bibliothèque Watin pour charger et manipuler les pages Web facilement. Cela a été conçu comme une bibliothèque de test pour les interfaces Web. Pour l'utiliser obtenir les dernières sur le site officiel http://watin.sourceforge.net/. Pour C#, le code suivant dans une application de console vous donnera le code HTML de la page d'accueil de Google (ceci est modifié à partir de l'exemple de démarrage sur le site WatiN). La bibliothèque contient également de nombreuses autres méthodes utiles pour obtenir et définir différentes parties de la page, prendre des mesures et vérifier les résultats.

using System; 
    using WatiN.Core; 

    namespace Test 
    { 
     class WatiNConsoleExample 
     { 
     [STAThread] 
     static void Main(string[] args) 
     { 
      // Open an new Internet Explorer Window and 
      // goto the google website. 
      IE ie = new IE("http://www.google.com"); 

      // Write out the HTML text of the body 
      Console.WriteLine(ie.Text); 


      // Close Internet Explorer and the console window immediately. 
      ie.Close(); 

      Console.Readkey(); 
     } 
     } 
    } 

Answer 6

L'effacement de l'écran de Google et comme mentionné ci-dessus utilisent le HttpWebRequest. Quand vous faites ce que vous faites, je vous recommande d'utiliser Fiddler pour vous aider à comprendre ce qui se passe vraiment.