HtmlParser整体框架

本秂侑毒 提交于 2020-03-24 09:53:35

HtmlParser关键包

org.htmlparser

         定义了htmlparser的一些基础类,其中最为重要的是ParserParserhtmlParser的最核心的类。

org.htmlparser.beans

         对VisitorFilter的方法进行了封装,定义了针对一些常用HTML元素操作的JavaBean,简化对常用元素的提取操作。包括:FilterBeanHTMLLinkBeanHTMLTextBeanLinkBeanStringBeanBeanyBaby等。

org.htmlparser.nodes

         定义了基础的node,包括:AbstractNodeRemarkNodeTagNodeTextNode等。 Node是形成树结构表示HTML的基础,所有的数据表示都是接口Node的实现。

org.htmlparser.tags

         定义了HtmlParser进行解析的网页中的各种标签

org.htmlparser.filters

         定义了各种过滤器filter,主要通过extractAllNodesThatMatch (NodeFilter filter)来对html页面指定类型的元素进行过滤,包括:AndFilterCssSelectorNodeFilterHasAttributeFilterHasChildFilterHasParentFilterHasSiblingFilterIsEqualFilterLinkRegexFilterLinkStringFilterNodeClassFilterNotFilterOrFilterRegexFilterStringFilterTagNameFilterXorFilter

org.htmlparser.visitors

         定义了各种访问者visitor,主要通过visitAllNodesWith (NodeVisitor visitor)来对html页面元素进行遍历,包括:HtmlPageLinkFindingVisitorNodeVisitorObjectFindingVisitorStringFindingVisitorTagFindingVisitorTextExtractingVisitorUrlModifyingVisitor

org.htmlparser.parserapplications

         定义了一些实用的工具,包括LinkExtractorSiteCapturerStringExtractorWikiCapturer,这几个类也可以作为HtmlParser使用样例。

org.htmlparser.tests

         各种功能的单元测试用例,可作为HtmlParser使用的样例。

HtmlParser内部关系结构图:后面我会对这个结构以及HtmlParser的解析流程进行详细的阐述。

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!