如果要对HTML进行解析,提取HTML的数据或者修改HTML数据,HtmlParser是一个不错的选择.
使用HtmlParser可以解析本地和网络上的HTML数据:
Parser parser = new Parser( new Winista.Text.HtmlParser.Http.HttpProtocol(new Uri("uriString")));
Parser parser = new Parser( new Winista.Text.HtmlParser.Lex.Lexer( "HtmlString" ) );
System.IO.Stream stream = new System.IO.FileStream( "filePath" , System.IO.FileMode.Open );
Parser parser = new Parser( new Winista.Text.HtmlParser.Lex.Lexer( new Winista.Text.HtmlParser.Lex.Page( stream ,"charSet") ) );
还可以分析某些特定节点的数据,使用 NodeClassFilter 指定要分析的节点类型:
NodeFilter filter = new NodeClassFilter( typeof( Winista.Text.HtmlParser.Tags.Div ) );
使用Parser实例的Parse方法可以获得节点数组
NodeList nodeList = parser.Parse( null );
NodeList nodeList = parser.Parse( filter);
现在分析一下的一段HTML:
<div class="divCss" id="div_1">
<div name="div" class="divCss" id="div_2">div_2</div>
<table name="table" id="table_1">
<tr>
<td>HtmlParser</td>
<td><div id="div_3"><font color="red">HtmlParser</font></div></td>
</tr>
</table>
</div>
txtResult是显示分析处理后的数据,txtSource是读取HTML数据的文本框
//记录个节点的起始位置,避免重复处理
IList<int> start = new List<int>( );
protected void Button1_Click ( object sender , EventArgs e )
{
this.txtResult.Text = string.Empty;
Lexer lexer = new Lexer( this.txtSource.Text );
Parser parser = new Parser( lexer );
NodeFilter filter = new NodeClassFilter( typeof( Winista.Text.HtmlParser.Tags.Div ) );
NodeList nodeList = parser.Parse( null );
if ( nodeList.Count == 0 )
txtResult.Text = "没有符合要求的节点";
else
{
for ( int i = 0 ; i < nodeList.Count ; i++ )
{
paserData( nodeList[i] );
}
}
}
private ITag getTag ( INode node )
{
if ( node == null )
return null;
return node is ITag ? node as ITag : null;
}
private void paserData ( INode node)
{
ITag tag = getTag( node );
if ( tag != null && !tag.IsEndTag( ) && !start.Contains(tag.StartPosition))
{
object oId = tag.GetAttribute( "ID" );
object oName = tag.GetAttribute( "name" );
object oClass = tag.GetAttribute( "class" );
this.txtResult.Text += tag.TagName + ":\r\nID:" + oId + " Name:" + oName
+ " Class:" + oClass + " StartPosition:" + tag.StartPosition.ToString( ) + "\r\n";
start.Add( tag.StartPosition );
}
//子节点
if ( node.Children != null && node.Children.Count > 0 )
{
paserData( node.FirstChild );
}
//兄弟节点
INode siblingNode = node.NextSibling;
while ( siblingNode != null )
{
paserData( siblingNode );
siblingNode = siblingNode.NextSibling;
}
}
txtResult显示的数据为:
DIV:
ID:div_1 Name: Class:divCss StartPosition:0
DIV:
ID:div_2 Name:div Class:divCss StartPosition:34
TABLE:
ID:table_1 Name:table Class: StartPosition:90
TR:
ID: Name: Class: StartPosition:127
TD:
ID: Name: Class: StartPosition:136
TD:
ID: Name: Class: StartPosition:160
DIV:
ID:div_3 Name: Class: StartPosition:164
FONT:
ID: Name: Class: StartPosition:180
HtmlParser将我们指定的数据给分析出来了,现在来对要分析的数据进行一些修改:给没有name和class属性的指定属性:
object oId = tag.GetAttribute( "ID" );
object oName = tag.GetAttribute( "name" );
object oClass = tag.GetAttribute( "class" );
if ( oName == null )
{
oName = "name";
tag.SetAttribute( "name" , oName.ToString( ) );
}
if ( oClass == null )
{
oClass = "class";
tag.SetAttribute( "name" , oClass.ToString( ) );
}
this.txtResult.Text += tag.TagName + ":\r\nID:" + oId + " Name:" + oName
+ " Class:" + oClass + " StartPosition:" + tag.StartPosition.ToString( ) + "\r\n";
start.Add( tag.StartPosition );
txtResult显示的数据为:
DIV:
ID:div_1 Name:name Class:divCss StartPosition:0
DIV:
ID:div_2 Name:div Class:divCss StartPosition:34
TABLE:
ID:table_1 Name:table Class:class StartPosition:90
TR:
ID: Name:name Class:class StartPosition:127
TD:
ID: Name:name Class:class StartPosition:136
TD:
ID: Name:name Class:class StartPosition:160
DIV:
ID:div_3 Name:name Class:class StartPosition:164
FONT:
ID: Name:name Class:class StartPosition:180
HtmlParser实现了我们的目的,现在在给节点为DIV并且ID为div_3的节点添加一个子节点:
object oId = tag.GetAttribute( "ID" );
object oName = tag.GetAttribute( "name" );
object oClass = tag.GetAttribute( "class" );
if ( tag.TagName == "DIV" && tag.GetAttribute( "ID" ) == "div_3" )
{
INode newNode = new TextNode( "add a new node" );
tag.Children.Add( newNode );
}
this.txtResult.Text += tag.TagName + ":\r\nID:" + oId + " Name:" + oName
+ " Class:" + oClass + " StartPosition:" + tag.StartPosition.ToString( ) + "\r\n";
输出nodeList[0].ToHtml( ):
<div class="divCss" id="div_1">
<div name="div" class="divCss" id="div_2">div_2</div>
<table name="table" id="table_1">
<tr>
<td>HtmlParser</td>
<td><div id="div_3"><font color="red">HtmlParser</font>add a new node</div></td>
</tr>
</table>
</div>
id为div_3的div节点后面加上了要添加的数据.
分享到:
相关推荐
主要介绍了Python中使用HTMLParser解析html实例,本文直接给出使用示例,并总结出HTMLParser含有的方法分为两类,一类是需要显式调用的,而另一类不需显示调用,需要的朋友可以参考下
之后,通过`import`语句引入所需的类,就可以开始使用HTMLParser解析HTML文档了。 总的来说,HTMLParser是一个强大且灵活的工具,适用于需要解析和操作HTML的Java应用,如爬虫、数据提取、网页自动化等场景。通过...
例如,以下是一个简单的使用HTMLParser解析HTML并打印所有`<a>`标签的例子: ```java import org.htmlparser.Parser; import org.htmlparser.util.NodeIterator; import org.htmlparser.nodes.TagNode; public ...
《使用HtmlParser解析HTML网页内容》 在信息技术领域,HTML(HyperText Markup Language)是用于构建和呈现网页的标准标记语言。然而,对于开发者而言,直接处理HTML文本有时是一项挑战,尤其是当需要从中提取特定...
接下来,让我们通过一个简单的示例来了解如何使用HTMLParser解析HTML文档。假设我们有一个HTML文件,名为`index.html`,包含以下内容: ```html <!DOCTYPE html> <html> <title>Example Page <h1>Hello, World...
HTMLParser是一个用于解析HTML文档的库,尤其在处理非结构化或不标准的HTML时非常有用。这个库可能被用于从网页中提取数据,比如在爬虫项目中,或者进行自动化测试时解析页面内容。本篇文章将深入探讨HTMLParser的...
如果我们要编写一个搜索引擎,第...好在Python提供了HTMLParser来非常方便地解析HTML,只需简单几行代码: from HTMLParser import HTMLParser from htmlentitydefs import name2codepoint class MyHTMLParser(HTMLPa
在本例中,我们将深入探讨如何使用HTMLParser库解析HTML页面,提取所需信息。 首先,我们需要导入Python的`HTMLParser`模块。在Python 3中,这个模块已经被重命名为`html.parser`,因此应该导入`html.parser`,而...
HTMLParser是一款专为Java开发人员设计的开源库,用于解析HTML文档。这个工具包小巧而强大,能够处理不规则的HTML结构,对于处理网络爬虫、网页数据提取或需要解析HTML内容的应用程序来说,是非常实用的。在提供的...
接下来,我们可以创建一个简单的例子来展示如何使用HTMLParser解析HTML: 1. DOM解析示例: ```java import org.htmlparser.Parser; import org.htmlparser.util.NodeList; import org.htmlparser.util....
例如,以下是一个简单的使用示例,展示如何使用HTMLParser解析一个HTML字符串并打印出所有的`<a>`标签: ```java import org.htmlparser.Parser; import org.htmlparser.util.NodeIterator; import org.htmlparser....
使用HtmlParser解析HTML文档,可以通过创建`HtmlParser`对象并调用其`parse`方法完成。 2. **提取所需信息:** 通过HtmlParser提供的各种过滤器和访问者模式,可以从解析后的HTML文档中抽取所需的信息。 3. **...
使用HTMLPARSER解析HTML内容。首先,创建一个ParserDelegator对象,然后调用parse方法,传入HTML内容和一个Handler。Handler是自定义的接口实现,用于处理解析过程中遇到的每个HTML元素。 6. **提取数据**: 在...
例如,以下是一个简单的使用HTMLParser解析HTML并提取所有链接的例子: ```java import org.htmlparser.Parser; import org.htmlparser.util.NodeList; import org.htmlparser.util.NodeIterator; public class ...
总结来说,使用HTMLParser解析网页涉及到以下步骤: 1. 继承`HTMLParser`并重写相关方法以定义解析逻辑。 2. 找到文章内容所在的标签,如`<p>`或`<article>`,并在适当的方法中处理它们。 3. 收集文章文本,并在适当...
以下是一个简单的使用HTMLParser解析HTML页面的Java代码示例: ```java import org.htmlparser.*; import org.htmlparser.filters.*; import org.htmlparser.nodes.*; import org.htmlparser.tags.*; import org....
3. **解析HTML**:调用解析器的`parse`方法,传入HTML源码或输入流,开始解析过程。 4. **处理解析事件**:注册事件处理器,当解析到特定元素时执行相应的代码逻辑。 5. **获取结果**:解析完成后,可以遍历解析树,...
如何在Java程序中利用正则表达式实现对字符串的解析.另外,HTMLParser是一款很强大的对HTML网页进行解析的工具,其中大量地用到正则表达式.