论文部分内容阅读
传统的互联网有害信息发现方法是依据Google、百度等元搜索工具，用户输入关键词进行检索，然后对获取的结果进行研判，但是用户经常无法准确地描述所需的资料，给出的关键词不准确，搜索结果常有用户不关心的垃圾数据，而一些有用的数据却不能列出。文中探讨了一种基于元搜索，引入关键词扩充技术的爬虫方法。该方法在网页抓取，用户检索的时候能扩充输入的关键词，从而提高搜索覆盖率和精度。该方法投入小，效果好，还可通过扩展应用到其他领域。