• 设为首页
  • 点击收藏
  • 手机版
    手机扫一扫访问
    迪恩网络手机版
  • 关注官方公众号
    微信扫一扫关注
    公众号

ContentExtractor: 自动抽取网页正文的算法,用JAVA实现

原作者: [db:作者] 来自: 网络 收藏 邀请

开源软件名称:

ContentExtractor

开源软件地址:

https://gitee.com/webcollector/ContentExtractor

开源软件介绍:

ContentExtractor

##简介ContentExtractor是一个开源的网页正文抽取工具,用JAVA实现,具有非常高的抽取精度。

##算法ContentExtractor的网页正文抽取算法使用的是CEPR,适用于几乎所有的包含正文的网页。算法简介:http://dl.acm.org/citation.cfm?id=2505558

##教程ContentExtractor的接口非常简单,用户可以根据网页的url,或者网页的html,来进行网页正文抽取:

根据url,抽取网页的正文:

public static void main(String[] args) throws Exception {        String content=ContentExtractor.getContentByURL("http://news.        	xinhuanet.com/world/2014-11/02/c_127166728.htm");        System.out.println(content);}

根据html,抽取网页的正文:

public static void main(String[] args) throws Exception {        String html="获取到的html源码";        String content=ContentExtractor.getContentByHtml(html);        System.out.println(content);}

##导入项目从ContentExtractor的github主页https://github.com/hfut-dmic/ContentExtractor上下载ContentExtractor-{版本号}-bin.zip,将解压后得到的jar包全部放到工程的build path即可。

##联系我们欢迎加入讨论群:385105758

邮箱:[email protected]

##开发者ContentExtractor由合肥工业大学dmic团队开发


鲜花

握手

雷人

路过

鸡蛋
该文章已有0人参与评论

请发表评论

全部评论

专题导读
热门推荐
热门话题
阅读排行榜

扫描微信二维码

查看手机版网站

随时了解更新最新资讯

139-2527-9053

在线客服(服务时间 9:00~18:00)

在线QQ客服
地址:深圳市南山区西丽大学城创智工业园
电邮:jeky_zhao#qq.com
移动电话:139-2527-9053

Powered by 互联科技 X3.4© 2001-2213 极客世界.|Sitemap