码迷,mamicode.com
首页 > Web开发 > 详细

NET 解析HTML代码——NSoup

时间:2016-08-03 23:59:52      阅读:774      评论:0      收藏:0      [点我收藏+]

标签:

NET 解析HTML代码——NSoup

NSoup是一个开源框架,是JSoup(Java)的.NET移植版本

1、直接用起来

NSoup.Nodes.Document htmlDoc = NSoup.NSoupClient.Parse(HTMLString);       //无需实例化

 

NSoup的强大之处在于可以用类似js的方法来获取节点元素

技术分享

技术分享

 

通过元素类型获取元素GetElementByTag("p")

技术分享
NSoup.Select.Elements ele= htmlDoc.GetElementsByTag(TbTag.Text);
foreach (var item in ele)
{
if (item.Attr("class") == "col-sm-4 col-xs-6 listtit1")   //通过Attr(""href)可以获取元素的属性
{
   sb.AppendLine(item.Text());     //通过Text()方法可以获取元素中的文本内容
}
}
技术分享

 

2、做了一个winform的小demo

技术分享

关键代码:

 下面以提取一个html代码中211大学名和地点的为例:

技术分享
        private void GetHtml_Click(object sender, EventArgs e)
        {
            //获取指定地址的Html代码
            TbCode.Text = "";
            string url = TbUrl.Text.Trim();
            WebClient client = new WebClient();
            client.Encoding = System.Text.Encoding.UTF8;
            string html = client.DownloadString(url);
            TbCode.Text = html;
        }

        private void Analysis_Click(object sender, EventArgs e)
        {
            NSoup.Nodes.Document htmlDoc = NSoup.NSoupClient.Parse(TbCode.Text);
            NSoup.Select.Elements ele= htmlDoc.GetElementsByTag(TbTag.Text);
            System.Text.StringBuilder sb=new StringBuilder();
            foreach (var item in ele)
            {
                sb.AppendLine(item.Text());
                foreach (var item1 in item.NextElementSibling.Children)
                {
                    if (item1.Attr("class") == "col-sm-4 col-xs-6 listtit1")
                    {
                        sb.AppendLine(item1.Text());
                    }
                }
            }
            TbElement.Text = sb.ToString();
        }
技术分享

 

html代码片段(因篇幅原因未贴全):

技术分享
<h4>安徽</h4>
<ul class="list-unstyled clearfix">
    <li class="col-sm-4 col-xs-6 listtit1"><a href="/daxue/detail/detail3712.html">合肥工业大学</a></li>
    <li class="col-sm-4 col-xs-6 listtit1"><a href="/daxue/detail/detail3715.html">中国科学技术大学</a></li>
    <li class="col-sm-4 col-xs-6 listtit1"><a href="/daxue/detail/detail3716.html">安徽大学</a></li>
</ul>
技术分享

 

效果(标签类型h4):

技术分享

 

3、插入数据库代码示例(提取专业名和编号):

技术分享
private void BtnInsert_Click(object sender, EventArgs e)
        {
            NSoup.Nodes.Document htmlDoc = NSoup.NSoupClient.Parse(TbCode.Text);
            NSoup.Select.Elements eles = htmlDoc.GetElementsByTag(TbTag.Text);

            string connectionString = @"这里是连接字符串";

            using (SqlConnection conn = new SqlConnection(connectionString))
            {
                conn.Open();
                foreach (var item in eles)
                {
                    if (item.Attr("width") == "20%" && item.NextElementSibling 
              != null && item.Text().Length > 4) { string sql = "insert into Major (mId,mName) values
                      (‘" +item.Text() + "‘,‘" + item.NextElementSibling.Text() + "‘)"; using (SqlCommand cmd = new SqlCommand(sql, conn)) { cmd.ExecuteNonQuery(); } } } conn.Close(); } }
技术分享

 

Html代码片段:

技术分享
<table class="cla" border="0" cellspacing="1" cellpadding="0" width="100%" bgcolor="#dedede">
        <tbody>
          <tr class="scon">
        <td bgcolor="#ffffff" width="20%"><strong>0101</strong></td>
        <td bgcolor="#ffffff" height="30"><strong>哲学类</strong></td>
      </tr> <tr><td bgcolor="#ffffff" width="20%">010101</td>
        <td bgcolor="#ffffff" height="30"><span class="pl20">哲学</span></td></tr> <tr><td bgcolor="#ffffff" width="20%">010102</td>
        <td bgcolor="#ffffff" height="30"><span class="pl20">逻辑学</span></td></tr> <tr><td bgcolor="#ffffff" width="20%">010103K</td>
        <td bgcolor="#ffffff" height="30"><span class="pl20">宗教学</span></td></tr> </tbody> </table>
技术分享

 

方法有很多种,就不一一列举了,可以多试几种,当然熟悉Python的朋友就不必这么麻烦了,Python有更专业的html解析器,有时间可以了解一下

NET 解析HTML代码——NSoup

标签:

原文地址:http://www.cnblogs.com/Leo_wl/p/5734930.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!