无代理下载速度低

Question

我已经写了一些代码来调用方法webClient.DownloadString。当我运行我的程序时，探查器显示这个方法在程序中占用了98%的时间（而不是处理器时间），并且下载速度太慢（大约是最大下载速度的10%）。

当我用Fiddler运行程序时，下载速度会增加到最大下载速度的75%-90%。

我的错误在哪里？如何提高应用程序的下载速度？

这是我的密码。

        WebClient wc = new WebClient();
        wc.Encoding = Encoding.GetEncoding("1251");
        wc.Proxy = null;
        HtmlDocument html = new HtmlDocument();
        html.LoadHtml(wc.DownloadString("http://some-site.com/" + htmlUrl));
        var c1 = html.GetElementbyId("content");
        foreach (var c2 in c1.ChildNodes.Where(c => c.Name == "div"))
        {
            foreach (var c3 in c2.ChildNodes.Where(c => c.Name == "a"))
            {
                var leftIndex = c3.InnerText.IndexOf('(');
                var rightIndex = c3.InnerText.LastIndexOf(')');
                var id = c3.InnerText.Substring(0, leftIndex - 1).Replace(" ", "");
                var name = c3.InnerText.Substring(leftIndex + 1, rightIndex - leftIndex - 1);
                SaveInDB(int.Parse(id), name);
            }
        }

为了提高下载速度，我已经在几个线程中运行了它。

我尝试使用其他变体wc.Proxy = null或wc.Proxy = GlobalProxySelection.GetEmptyWebProxy()或WebProxy.GetDefaultProxy()或wc.Proxy = new WebProxy()。结果我的下载速度一直很低。

关闭"控制面板"/"Internet选项"->"连接"选项卡->"局域网设置"上的"自动检测设置"也没有提高下载速度。

Answer 1

IWebProxy proxy = GlobalProxySelection.GetEmptyWebProxy();
wc.Proxy = proxy;