Comment vérifier s'il s'agit d'une page d'erreur 404 (la page n'existe pas) à l'aide de HtmlAgilityPack

Vous devez enregistrer un événement PostRequestHandler sur l'instance HtmlWeb . Il sera généré après chaque document téléchargé et vous aurez accès à l'objet HttpWebResponse . Il a une propriété pour le StatusCode .

 HtmlWeb web = new HtmlWeb();
 HttpStatusCode statusCode = HttpStatusCode.OK;
 web.PostRequestHandler += (request, response) =>
 {
     if (response != null)
     {
         statusCode = response.StatusCode;
     }
 }

 var doc = web.Load(completeUrl)
 if (statusCode == HttpStatusCode.OK)
 {
     // received a read document
 }

En regardant le code du HtmlAgilityPack sur GutHub, c'est encore plus simple, HtmlWeb a une propriété StatusCode qui est définie avec la valeur:

var web = new HtmlWeb();
var document = web.Load(completeurl);

if (web.StatusCode == HttpStatusCode.OK)
{
    var urls = document.DocumentNode.Descendants("img")
          .Select(e => e.GetAttributeValue("src", null))
          .Where(s => !String.IsNullOrEmpty(s)).ToList();
}

Mettre à jour

Une mise à jour de l'API AgilityPack a été mise à jour. Le truc reste le même:

var htmlWeb = new HtmlWeb();
var lastStatusCode = HttpStatusCode.OK;

htmlWeb.PostResponse = (request, response) =>
{
    if (response != null)
    {
        lastStatusCode = response.StatusCode;
    }
};