Htmlagilitypack après la connexion au site Web Https avec HttpWebRequest?

c# html-agility-pack https httpwebrequest

Question

Je souhaite analyser un site HTML tel que pluralsight, Forexample ( https://app.pluralsight.com/id ?), Comment puis-je me connecter d'abord au site par programmation (sans utiliser le contrôle du navigateur Web), puis appeler une autre URL (par exemple: Pluralsight ) et obtenez une réponse et une analyse avec le pack Htmlagility.

Mais j'ai écrit un code de connexion, mais je ne connais pas l'étape suivante.

public class Login
{
    private CookieContainer Cookies = new CookieContainer();



public void SiteLogin(string username, string password)
{
    Uri site = new Uri("https://app.pluralsight.com/id?");

    HttpWebRequest wr = (HttpWebRequest)WebRequest.Create(site);
    wr.Method = "Post";
    wr.ContentType = "application/x-www-form-urlencoded";
    wr.Referer = "https://app.pluralsight.com/id?";
    wr.CookieContainer = Cookies;
    var parameters = new Dictionary<string, string>{
    {"realm", "vzw"},
    {"goto",""},
    {"gotoOnFail",""},
    {"gx_charset", "UTF-8"},
    {"rememberUserNameCheckBoxExists","Y"},
    {"IDToken1", username},
    {"IDToken2", password}
};

    string input = string.Empty;
    using (var requestStream = wr.GetRequestStream())
    using (var writer = new StreamWriter(requestStream, Encoding.UTF8))
        writer.Write(ParamsToFormEncoded(parameters));

    using (var response = (HttpWebResponse)wr.GetResponse())
    {

        if (response.StatusCode == HttpStatusCode.OK)
        {
            //but I do not know the next step.
        }
    }
}

private string ParamsToFormEncoded(Dictionary<string, string> parameters)
{
    return string.Join("&", parameters.Select(kvp => Uri.EscapeDataString(kvp.Key).Replace("%20", "+")
    + "=" + Uri.EscapeDataString(kvp.Value).Replace("20%", "+")
    ).ToArray());
}
}

Réponse populaire

Vous devez obtenir le flux pour la réponse via HttpWebResponse.GetResponseStream , puis charger le document via la méthode Load du HtmlDocument.

var doc = new HtmlAgilityPack.HtmlDocument();
doc.Load(response.GetResponseStream());
//further processing...



Sous licence: CC-BY-SA with attribution
Non affilié à Stack Overflow
Est-ce KB légal? Oui, apprenez pourquoi
Sous licence: CC-BY-SA with attribution
Non affilié à Stack Overflow
Est-ce KB légal? Oui, apprenez pourquoi