码迷,mamicode.com
首页 > Web开发 > 详细

经验总结21--抓取WEB数据,汇率,HtmlAgilityPack

时间:2014-07-23 17:00:01      阅读:228      评论:0      收藏:0      [点我收藏+]

标签:c#获取汇率   htmlagilitypack   

网上找了很多资料,PHP的比较多,然后找到有csv文件的,处理起来很麻烦,国外的网站速度很慢。

最后还是去页面上抓取数据,我是从中国银行抓取的,各位可去其他网站抓取。

1、模拟请求URL。

string url = "http://srh.bankofchina.com/search/whpj/search.jsp?pjname=1316";

HttpWebRequest request = WebRequest.Create(url) as HttpWebRequest;
                request.Method = "GET";
                request.ContentType = "text/html; charset=UTF-8";
                request.UserAgent = "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:30.0) Gecko/20100101 Firefox/30.0";
                HttpWebResponse response = request.GetResponse() as HttpWebResponse;
                Stream myResponseStream = response.GetResponseStream();
                StreamReader myStreamReader = new StreamReader(myResponseStream, Encoding.UTF8);
                string result = myStreamReader.ReadToEnd();

2、对HTML进行处理。使用HtmlAgilityPack进行辅助。

HtmlDocument doc = new HtmlDocument();
                doc.LoadHtml(result);
                foreach (HtmlNode node in doc.DocumentNode.SelectNodes("//td"))
                {
                    if (node.InnerText == "美元")
                    {
                        result = node.NextSibling.NextSibling.InnerText;
                        break;
                    }
                }

具体数据位置,自己可先用F12查找到,然后使用工具进行查找,详细文档自己去查,这个方法暂时获取到USD-CNY的汇率。


经验总结21--抓取WEB数据,汇率,HtmlAgilityPack

标签:c#获取汇率   htmlagilitypack   

原文地址:http://blog.csdn.net/qijunming1208/article/details/38065189

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!