HTML XPath Поиск по названию класса

Проблема заключается в запросе, в котором вы получаете titles . Вы ищете DIV , который ый class атрибут содержит PartialSearchResults-item , который является корневым узлом вашего элемента. Но есть и другие узлы, которые удовлетворяют вашему запросу, например div с классом PartialSearchResults-item-title также удовлетворяющим вашему запросу. Затем, выбирая эти 2 divs, вы повторяете их и пытаетесь получить суточные дочерние узлы, для первой итерации ваш код будет работать нормально, потому что у вас есть правильный узел, но на второй итерации у вас есть узел с классом PartialSearchResults-item-title которой только один a , так что вы получите NullReferenceException во второй итерации , когда вы запрашиваете для описания, потому что вы пытаетесь получить значение InnerText свойства null объекта

string description = node.SelectSingleNode(".//*[contains(@class,'PartialSearchResults-item-abstract')]").InnerText;

Я бы предложил не использовать contains . В вашем случае ваш корневой узел имеет только один класс PartialSearchResults-item , поэтому вы можете запросить его так:

var titles = hd.DocumentNode.SelectNodes("//div[@class='PartialSearchResults-item']");