论文部分内容阅读
摘 要：资讯汇聚系统是针对新闻的时效性而开发的专门对网络新闻、微博、微信、短信等新媒体上的信息进行衔接和管理，并能够实现信息的采集、搜索、审核、发布等需求的系统。本文从资讯汇聚的应用背景、设计架构、软硬件功能几个方面进行分析讨论，以供同业者参考借鉴。
关键词：资讯汇聚；信息采集审核；系统设计；软硬件功能
1 资讯汇聚系统的应用背景
在竞争如此激烈的今天，哪个媒体最先掌握了最新最热门的资讯，哪个媒体就更容易获得更多的观众与关注。在信息技术日新月異的今天，新媒体不断的涌现，如网络、新闻、微博、微信、短信等，尤其是近几年出现的微博，以其高度的时效性、易传播性，成为媒体中的翘楚。但是这些新兴媒体也有其自身的局限性，如单条的信息量较小、信息的深度与广度还远远不够等，还必须与传统媒体如与电视、报纸、新媒体等相结合，才能产生既具有时效性又具有广度与深度的新闻。在这种背景下，很多电视台及新媒体运营开始关注并重视网络、新闻、短信，特别是微博、微信等新兴媒体的信息采集，充分利用互联网传播特点，第一时间从互联网发现新闻线索以及获得原始素材提供给记者进行深度调查和报道。因此，演播室部署专门的“资讯汇聚”系统成为必然。该系统是专门针对电视台与新媒体运营对互联网信息的采集、搜索、线索发现、信息发布等需求而开发的专业系统。
2 资讯汇聚系统设计架构
1）业务模块设计。
资讯汇聚系统结构分为数据层和业务层两个层次，化分为数据采集前端服务和筛选审查终端两大模块，两个模块间使用Socket进行通讯以便应对不同的部署环境，另外还有一个下载服务模块。数据采集前端服务主要负责数据采集，主要有：短信数据抓取、微博数据抓取、图片视频文件下载、前端服务管理等模块。筛选审查终端将从服务器拿到的数据保存到数据库，并提供筛选、编辑、审核、推送功能，主要分为：终端配置管理、短信筛选编辑、短信审核推送、微博筛选编辑、微博审核推送、短信投票抽奖、微博投票抽奖。整个系统的流程图可以用下图明确表示：
2）系统方案设计。
资讯汇聚系统的整个网络结构由资讯汇聚内网服务器、外网服务器、审核工作站和以太网交换机组成。审核工作站、资讯汇聚内网服务器通过网线连接到交换机，外网服务器直接连接外网，数据信息通过外网服务器采集到数据库，再由USB摆渡把信息传到内网服务器上，审核工作站直接读取内网服务器中的数据信息，并且将筛选后的数据存入资讯汇聚内网服务器中，资讯汇聚内网服务器可将数据推送给在线包装点评系统，在线包装点评系统根据数据自动匹配模板，生成播出表单。资讯汇聚系统拓扑图如下所示：
3 软硬件功能
1）资讯汇聚审核客户端。
安装了采集审核软件的审核工作站能够接收资讯控制终端的控制命令，控制数据抓取模块汇聚互联网上的资讯内容。审核客户端把视频、图文、短信、微博、微信等信息源及时抓取并进行内容管理，通过web服务进行双向交互。可根据实际需求把资讯内容主动推送给各个系统或由各个系统主动获取资讯内容信息实时播出，同时控制文件下载客户端下载文件。作为一个独立存在的应用程序软件，采集审核软件通过Socket和资讯控制终端中进行通信，可以同时接受多个资讯控制终端的控制。
2）资讯汇聚服务器。
资讯汇聚服务器可实时采集互联网上最新发布的微博、网站等信息进行筛选修改后推送到在线包装系统进行展示。在系统设计架构里，分为内网服务器和外网服务器两种。资讯汇聚外网服务器负责微信、微博等综合信息的采集，采集的信息通过USB摆渡由内网资讯汇聚服务器负责提供信息下载服务。
4 结语
资讯汇聚系统可实现如下功能：①能及时地从微博、论坛、新闻等互联网新媒体抓取信息；②能实时抓取微信，包括图片、文字、语音；③深度抓取微博粉丝、关注、回复、评论等；④支持智能搜索并配备强大的内容审核功能；⑤根据时间段、关键词等统计要素形成趋势图、各种分布统计图功能；⑥独特的采集监测技术，及时跟踪采集源的变化并作出相应的调整策略，保障数据的安全性与完整性；⑦支持多通道多任务的集群式采集；⑧支持一对多的应用模式，一台服务器可以链接多台资讯汇聚筛选段；⑨支持远程审核，用户在任意网络下都可以编辑审核条目；⑩微信微博条目支持简单编辑图片、视频源；1111用户可以在任何客户端获取服务器资源并进行编辑，同时支持多客户端同时在线使用；1212支持用户管理模块，可以实现用户分类、用户授权以及管理；1313支持系统日志管理，方便追踪用户使用状态等。其对电视台等传统媒体的应用意义非凡，希望通过本文的阐述能够为该系统的广泛应用做出贡献。
关键词：资讯汇聚；信息采集审核；系统设计；软硬件功能
1 资讯汇聚系统的应用背景
在竞争如此激烈的今天，哪个媒体最先掌握了最新最热门的资讯，哪个媒体就更容易获得更多的观众与关注。在信息技术日新月異的今天，新媒体不断的涌现，如网络、新闻、微博、微信、短信等，尤其是近几年出现的微博，以其高度的时效性、易传播性，成为媒体中的翘楚。但是这些新兴媒体也有其自身的局限性，如单条的信息量较小、信息的深度与广度还远远不够等，还必须与传统媒体如与电视、报纸、新媒体等相结合，才能产生既具有时效性又具有广度与深度的新闻。在这种背景下，很多电视台及新媒体运营开始关注并重视网络、新闻、短信，特别是微博、微信等新兴媒体的信息采集，充分利用互联网传播特点，第一时间从互联网发现新闻线索以及获得原始素材提供给记者进行深度调查和报道。因此，演播室部署专门的“资讯汇聚”系统成为必然。该系统是专门针对电视台与新媒体运营对互联网信息的采集、搜索、线索发现、信息发布等需求而开发的专业系统。
2 资讯汇聚系统设计架构
1）业务模块设计。
资讯汇聚系统结构分为数据层和业务层两个层次，化分为数据采集前端服务和筛选审查终端两大模块，两个模块间使用Socket进行通讯以便应对不同的部署环境，另外还有一个下载服务模块。数据采集前端服务主要负责数据采集，主要有：短信数据抓取、微博数据抓取、图片视频文件下载、前端服务管理等模块。筛选审查终端将从服务器拿到的数据保存到数据库，并提供筛选、编辑、审核、推送功能，主要分为：终端配置管理、短信筛选编辑、短信审核推送、微博筛选编辑、微博审核推送、短信投票抽奖、微博投票抽奖。整个系统的流程图可以用下图明确表示：
2）系统方案设计。
资讯汇聚系统的整个网络结构由资讯汇聚内网服务器、外网服务器、审核工作站和以太网交换机组成。审核工作站、资讯汇聚内网服务器通过网线连接到交换机，外网服务器直接连接外网，数据信息通过外网服务器采集到数据库，再由USB摆渡把信息传到内网服务器上，审核工作站直接读取内网服务器中的数据信息，并且将筛选后的数据存入资讯汇聚内网服务器中，资讯汇聚内网服务器可将数据推送给在线包装点评系统，在线包装点评系统根据数据自动匹配模板，生成播出表单。资讯汇聚系统拓扑图如下所示：
3 软硬件功能
1）资讯汇聚审核客户端。
安装了采集审核软件的审核工作站能够接收资讯控制终端的控制命令，控制数据抓取模块汇聚互联网上的资讯内容。审核客户端把视频、图文、短信、微博、微信等信息源及时抓取并进行内容管理，通过web服务进行双向交互。可根据实际需求把资讯内容主动推送给各个系统或由各个系统主动获取资讯内容信息实时播出，同时控制文件下载客户端下载文件。作为一个独立存在的应用程序软件，采集审核软件通过Socket和资讯控制终端中进行通信，可以同时接受多个资讯控制终端的控制。
2）资讯汇聚服务器。
资讯汇聚服务器可实时采集互联网上最新发布的微博、网站等信息进行筛选修改后推送到在线包装系统进行展示。在系统设计架构里，分为内网服务器和外网服务器两种。资讯汇聚外网服务器负责微信、微博等综合信息的采集，采集的信息通过USB摆渡由内网资讯汇聚服务器负责提供信息下载服务。
4 结语
资讯汇聚系统可实现如下功能：①能及时地从微博、论坛、新闻等互联网新媒体抓取信息；②能实时抓取微信，包括图片、文字、语音；③深度抓取微博粉丝、关注、回复、评论等；④支持智能搜索并配备强大的内容审核功能；⑤根据时间段、关键词等统计要素形成趋势图、各种分布统计图功能；⑥独特的采集监测技术，及时跟踪采集源的变化并作出相应的调整策略，保障数据的安全性与完整性；⑦支持多通道多任务的集群式采集；⑧支持一对多的应用模式，一台服务器可以链接多台资讯汇聚筛选段；⑨支持远程审核，用户在任意网络下都可以编辑审核条目；⑩微信微博条目支持简单编辑图片、视频源；1111用户可以在任何客户端获取服务器资源并进行编辑，同时支持多客户端同时在线使用；1212支持用户管理模块，可以实现用户分类、用户授权以及管理；1313支持系统日志管理，方便追踪用户使用状态等。其对电视台等传统媒体的应用意义非凡，希望通过本文的阐述能够为该系统的广泛应用做出贡献。