Web新闻热点信息的自动发现及展示

被引量 : 0次 | 上传用户:wushaojunbaobao3
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的飞速发展,网络媒体已经成为继报纸、广播、电视之后的第四大媒体。由于网络新闻所具备的开放性、信息传播的快速性等特点,使其成为热点信息传播的主要途径,也是产生热点信息的重要来源,因此,如何自动的从巨大的网络资源中发现当前的热点事件及实体具有非常重要的意义。热点信息包括热点话题及热点词语,是指某段时间内社会上发生的重大事件或人们普遍关注的对象;本文通过研究现有的话题检测与跟踪以及关键词的自动抽取等技术,利用这些技术来自动发现网络新闻报道中热点信息,本文的主要工作有:1、新闻网页的分类抓取及预处理操作。本文利用各大网站的编辑者将网页按目录结构存放这一特点,设计了一个分类抓取的网络爬虫,并在抓取的过程中进行网页的正文抽取。然后对正文信息进行分词、特征抽取等预处理操作,为后面的热点信息的发现提供数据。2、针对高维向量的稀疏问题,提出了一种稀疏向量压缩存储和相似度计算方法。3、热点信息的自动发现功能。首先分析了热点词语和热点话题的特点,采用中科院的分词工具ICTCLAS进行命名实体的抽取,结合PAT-Tree和互信息评估方法对非实体串进行抽取,最后进行热度评估,抽取出热点词语;使用Single-Pass二次聚类算法进行话题的检测与跟踪,首先对当天报道进行局部聚类,形成候选话题集,然后再与旧话题集进行归并聚类,形成最终的话题集,然后对这些话题进行热度排序,最终形成热点话题。4、热点信息的展示功能。通过对热点话题和热点词语进行统计分析,最终以各种图表的方式进行了展示。
其他文献
<正>中国现代木结构建筑技术产业联盟是201 2年8月经中国城市科学研究会批准成立的非盈利服务型联合体,是由从事木结构建筑行业的企业,包括开发、设计、施工、制造、材料供应
"景点模拟导游"课堂通常采用基于视频的课件资源,即播放视频由学生同步讲解,该方法最大的不足在于课件的内容固定,不利于培养学生的应变能力。将虚拟现实技术引入课堂,以游览者
火炕作为一种经济实用的多功能生活设施,在我国北方农村广为流传。该文探讨了火炕的内涵、形式类型及其发展演变,主张因地制宜,在继承优秀传统的基础上对火炕加以改进与应用,
文章采用电弧离子镀技术,选取AISI304为基材,以纯Ti为靶材,在Ar/CH4气氛中沉积Ti-C涂层,所用偏压分别为-200 V、-400 V和-600 V。通过扫描电子显微镜(SEM)、显微硬度计、球-盘
目的:探索艾灸对实验性RA家兔关节滑膜液细胞因子水平的影响及其胆碱能神经调控机制。方法:将日本大耳白兔随机分为空白对照组、RA模型组、艾灸治疗组、艾灸治疗迷走神经切断
以N-乙酰氨基葡萄糖为原料,经烯丙基化、苯亚甲基化、苄基化和选择性开环等4步反应,合成了2-乙酰氨基-2-去氧-3,6-二-氧-苄基-α-D-吡喃葡萄糖烯丙基苷,总收率53.4%,其结构经
改革开放后,我国证券市场开始快速发展。分拆上市作为企业资产重组的新方式之一,逐渐成为企业消除过度兼并与收购造成的多元化价值耗散、实施投融资策略、提升母公司股价、实
菲利普·锡德尼(Philip Sidney,1554-1586)是文艺复兴时期英国伊丽莎白时期的诗人、理论家。他的文论著作《为诗辩护》体现了人文主义思想特征,是英国文艺复兴时期的人文主义的
H公司成立于1995年,是香港H集团在大陆投资兴办的食用植物油加工、生产及销售独资企业,投资总额3.5亿元港币。注册资本7500万元,占地面积20万平方米,引进国际先进的物理精炼和自
城市管理综合执法作为行政执法体制改革和解决城市管理顽疾的有效途径之一,在创设初期取得了较为显著的成效。但近年来,城管执法人员与流动摊贩及市民的冲突不断发生,也使得城管