如何从网页中提取文本内容?

前端之家收集整理的这篇文章主要介绍了如何从网页中提取文本内容?前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
我正在开发一个java应用程序,它可以从不同的网页获取文本信息,并将其汇总到一个页面.例如,假设我在不同的网页上有新闻,如印度教,印度时报,政治家等.现在我的应用程序应该从这些页面的每一个中提取重要点,并将它们作为单个新闻组合在一起.应用程序基于Web内容挖掘的概念.作为该领域的初学者,我无法理解从哪里开始我已经通过研究论文解释了噪声去除作为建立这个应用程序的第一步.

所以,如果给我一个新闻网页,第一步是从页面提取主要新闻,不包括链接,广告,无用图像等.我的问题是我该怎么做?请给我一些很好的教程,解释使用Web内容挖掘实现这种应用程序.或者至少给我一些提示如何实现它?

解决方法

您可以使用 readabilityboilerpipe这两个开源工具完成此任务.对于教程,您应该阅读代码&这两个项目的文档.

猜你在找的HTML相关文章