Почему HttpWebRequest генерирует исключение вместо HttpStatusCode.NotFound?

Я пытаюсь проверить наличие Url, используя HttpWebRequest. Я нашел несколько примеров, которые в основном делают это:

HttpWebRequest request = (HttpWebRequest)HttpWebRequest.Create(Url);
request.Method = "HEAD";
using (HttpWebResponse response = request.GetResponse() as HttpWebResponse)
{
    return response.StatusCode;
}

Однако, если URL-адрес действительно сломан, он не возвращает ответ, вместо этого генерирует исключение.

Я изменил свой код на это:

try
{
    HttpWebRequest request = (HttpWebRequest)HttpWebRequest.Create(Url);
    request.Method = "HEAD";
    using (HttpWebResponse response = request.GetResponse() as HttpWebResponse)
    {
        return response.StatusCode;
    }
}
catch (System.Net.WebException ex)
{
    var response = ex.Response as HttpWebResponse;
    return response == null ? HttpStatusCode.InternalServerError : response.StatusCode;
}

который, кажется, наконец-то делает то, что я хочу.

Но я хотел бы знать, почему запрос генерирует исключение вместо того, чтобы возвращать ответ с кодом статуса NotFound?

Ответы

public static class HttpWebResponseExt
{
    public static HttpWebResponse GetResponseNoException(this HttpWebRequest req)
    {
        try
        {
            return (HttpWebResponse)req.GetResponse();
        }
        catch (WebException we)
        {
            var resp = we.Response as HttpWebResponse;
            if (resp == null)
                throw;
            return resp;
        }
    }
}