基于XML的新型数据搜索引擎

来源 :中国信息导报 | 被引量 : 0次 | 上传用户:Dream_624727
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  Shunsaku中文名称为:瞬索,是富士通公司推出的创新产品,解决了以关系数据库为核心的现存技术所难以解决的”设计阶段的性能保障、削减开发成本、运行简单”等问题。瞬索把到目前为止不能利用的不同种类或形式的数据群统一为XML型数据,使信息得到快速有效的利用。它还适用于在现存系统中要求对查询性能进行改善和实现高速查询的领域。使用瞬索不需要对在不同的事业单位或部门进行单独管理的数据进行重构,而是将其XML化后,快速地进行统一和联合,实现跨越多个系统的信息系统构筑。
  
  1.工作原理
  
  Shunsaku(瞬索)是由两种服务器构成的XML型数据库。这两种服务器是:把查询对象的数据作为XML型数据进行储存,受理查询要求,并进行访问文件管理和结果应答的“主导服务器”,接受主导服务器的要求,实行高速查询处理的引擎部分的”搜索服务器”。瞬索还采用了高密度型的服务器——“刀锋服务器”,以保证性能和降低成本。刀锋服务器是指在同一个机箱中,装入多个具有服务器功能的板状物(刀锋服务器),数据可以被分散到这些刀锋服务器上进行并列处理。这样,能够根据数据规模简单地进行扩展,实现了以低成本获取高可靠性的服务器系统。构成刀锋服务器的最小查询单位是一片一片的刀锋。Linux/Windows版的Shunsaku(瞬索)可以把主导服务器和搜索服务器配置在同一个服务器中。因为Shunsaku(瞬索)是由这些不同形式的、高性能的系统所构成,所以它可以灵活对应从低端(MB)到高端(TB)的数据,快速构筑起“对来自现场的第一手信息进行有效利用”的体系。
  
  2.核心技术
  
  SIGMA技术:Shunsaku(瞬索)使用的SIGMA查询技术,无论查询关键词有多少个,都能通过SIG-MA技术把这些关键词合成起来生成自动过滤筛。它对查询对象数据依次进行匹配,并读入符合查询条件的数据。采用这个技术的优势在于:无论查询条件多么复杂,也与只有一个查询条件的时候一样,只要对所有查询对象数据进行一次查询处理,就能实现无遗漏的、稳定的查询。 高速多载运行技术:所谓高速多载运行技术是指在使用者多、查询要求量大的情况下,也能保证稳定的查询性能的技术。采用高速多载运行技术的优点在于:可以有效降低由于访问高峰出现而对系统造成的影响。这种技术,就好像将信息高速公路的单行线,转变成为动态变化的并行线,大大提高了系统的效率和使用率。这与以往使用RDB的查询系统相比,效果更好。
  刀锋服务器的有效利用技术:刀锋服务器的有效利用技术是指在查询处理时,数据自动地分散到多个刀锋服务器上同时进行并列处理,所以,即使是在处理大量的数据时也能保证稳定的查询,性能。Shunsaku(瞬索)通过使用SIGMA技术和高速多载运行技术,可以在各种情况下保证稳定的查询性能,只要将数据分散到各个CPU(刀锋服务器)上,通过这些CPU(刀锋服务器)的同时运作,就可以实现全CPU的同时查询处理。也就是说,当CPU(刀锋服务器)数增加为两倍时,查询性能也增长为原来的两倍。利用刀锋服务器技术,只要根据查询数据量和查询时间的要求,简单地增设CPU(刀锋服务器),就能使性能得到保证。
  
   3.应用现状及前景展望
  
  “瞬索”自2003年正式推出,就受到很大关注,并在市场应用上取得较大认同。基于“瞬索XML数据搜索引擎”,企业可以轻松进行信息整合、应对海量数据搜索和构建知识管理系统、内容管理系统,从而加速传统业务系统,并且大幅度削减TCO(总体拥有成本)。2004年10月27日,在由“计算机世界方案评析实验室”主办的“优秀中间件解决方案”评选中,“瞬索”获得了“优秀中间件方案设计奖”。
  “瞬索”在很多行业都已经有成功案例,如房地产、网站、铁路、媒体、银行和保险等。日本九州大学的开发“大学评估信息系统”就采用了“瞬索XML数据搜索引擎”。由于“瞬索”底层采用“XML数据仓库”,能够处理各种变化的信息,而不需要考虑数据库设计和调优的问题。当向系统导入数据时,用户只需向系统中堆积尽可能多的数据,根本不需要考虑其他问题。2003年7月至9月,日本三洋房产有限公司采用”瞬索”快速开发出基于互联网的房屋户型平面图检索系统,其响应时间比以前的搜索系统快了近10倍,优化了销售流程。2004年2月韩国书店联盟采用“瞬索XML数据搜索引擎”构建了图书搜索系统,新系统比旧系统快了5倍,无论搜索条件多么复杂,都可以在3秒内显示结果。据统计,到目前为止,“瞬索”全球的成功案例已经有50例左右,还有300多个项目在商谈中,更多的用户在试用。
  “瞬索”在数字化要求较高的行业有广泛的应用前景。据权威机构Jupiter Research的报告所示,各行业所产生的各种数据每6—8个月便以双倍或更快的速率增加。这些信息都是企业的宝贵财产,庞大繁琐的数据,带给企业和客户更多的是困惑。而且,信息技术越来越复杂,项目预算越来越庞大,系统一旦定型,要改变就非常困难。随着信息化市场的不断成熟和XML技术的发展,用户对企业中的结构化和非结构化的信息资源的搜索、分析越来越重视,因此,”瞬索XML数据搜索引擎”有着广阔的市场前景。
  
  参考文献
  
  1 郭瑞华.XML数据库技术.现代图书情报技术,2004(9)
  2 赵铭.“瞬索”技术使搜索引擎摆脱束缚.中国计算机报,2004—12一01
  3“瞬索”捞针于数字大海.网络世界,2004—12—20
  4 XML解决利用数据难题.每周电脑报,2004—11—2
  5 富士通“瞬索”亮相中国http://cn.fujitsu.com/it/news/2004—9—22.htm
  6 厂商推动瞬间搜索海量数据每周电脑报,2004—11—01 (作者单位:陈丽香 华东师范大学商学院 上海 200062
  郭一翔 天津工业大学通信学院 天津 300160)
其他文献
我国下一代互联网示范项目计划今年年底完成主干网(覆盖20个城市39个核心节点)建设,并实现与国际下一代互联网的高速连接,这标志着以IPv4为基础的传统互联网正在向下一代互联网全面演进。以IPv6为核心技术的下一代互联网将带来互联网世界的全方位升级。与此同时,电信网朝着下一代电信网的方向演进,二者的互联、互通、互补将形成下一代网络格局。随着网络的飞速发展与普及,人们对信息服务提出越来越高的要求,建设
期刊
IPTV是IT技术引入电视领域的产物,它给人们生活带来的革命性变化,不仅仅是技术上的,也不仅仅是观看电视节目的方式的变化,更重要的是人们的交流方式和内容的变化。在IPTV环境下,你可以是观众,也可以是演员;你可以观看一些娱乐节目,也可以观看任何时间、任何地点、发生的任何事情。如果说,目前的Internet为你打开了通往文字世界的大门,那么,IPTV将为你打开通往声色世界的大门。    PTV简析 
期刊
在中国科学院学部成立50周年之际,“走中国特色自主创新之路”院士座谈会于6月3日在人民大会堂举行。中共中央总书记、国家主席、中央军委主席胡锦涛亲切会见与会代表,并作了重要讲话。胡锦涛强调,当今世界,科学技术正成为经济社会发展的决定性力量,科技自主创新能力正成为国家竞争力的核心。我们一定要坚持以邓小平理论和“三个代表”重要思想为指导,全面落实科学发展观,大力实施科教兴国战略和人才强国战略,把提高自主
期刊
本刊讯 5月31日,为期两天的以“信息技术促进发展”为主题的亚太地区城市信息化论坛第五届年会在上海召开。中共中央政治局常委、国务院副总理黄菊向年会发去贺电。黄菊在贺电中指出,在经济全球化步伐日益加快的今天,信息技术的迅猛发展和广泛应用,对各国经济和社会发展正产生着日益深刻的影响;并表示中国愿意通过包括亚太地区城市信息化论坛在内的有关国际合作交流平台不断加强全球信息化合作与交流,共同致力于信息化造
期刊
在第八届北京科博会”科技中国”论坛上,北京市副市长陆吴就北京经济结构特征、文化力对北京经济增长的促进以及北京IT产业发展的机会发表了看法。  陆昊副市长在介绍北京经济结构时说,到2004年底为止,北京主要产业依其占全市经济总量(CDP)的比重进行排位的话,位居第一位的是制造业;第二位是金融保险业(占GDP总量14.6%);第三位是广义的电子信息产业(占GDP总量7.9%),主要指通信、信息传输、计
期刊
在网络环境下,对数字化信息资源知识产权保护的力度正逐渐加大。随之而来的问题是,公众获取和合理使用信息资源的空间被进一步压缩。如何平衡二者之间的关系,是知识产权保护的核心所在。    1.对于网络知识产权保护的两种声音    数字空间的信息资源以非线性结构存在,容易被复制和传输、压缩并被多次利用,因而给网络知识产权的保护带来了困难。特别是在著作权保护和电子商务领域,这一问题更为突出。传统知识产权的许
期刊
2004年10月美国发布《网络和信息技术研究和发展项目计划:2004财政年度机构间协调报告》[1](以下简称NITRD 2004)。这个机构间的协调报告全面描述了美国跨部门的联邦网络与信息技术研发项目(NITRD)的2004财政年度以及实施这个项目的组织机构。2004财政年度总统预算中为NITRD项目提供了22亿美元的资金,比2003年提高了1/6。通过对重要的研究与相关活动的协调,NITRD项目
期刊
中国工程院院士、中科院计算技术研究所所长李国杰在“中国可持续发展战略院士论坛”上演讲(摘要)    《电子信息产业经济运行统计公报》的数据显示:2004年,电子信息产业销售收入2.65万亿元,增长40%;出口2000亿美元,产业规模居世界前列。信息产业增加值占国内生产总值的比重上升到7.2%。通信业业务总量完成9770亿元,比上年增长34%;固定电话和移动电话用户总数达到6.5亿户,居世界第一位,
期刊
随着世界经济信息化和全球化趋势的增强,中国加入WTO和融入世界经济,我国电子商务正逐步走向全面应用,并渗透到社会经济的各个层面。据易观国际《互联网研究系列报告——电子商务(2004)》显示,预计今年中国电子商务交易总额将从去年的4400亿元激增至6200亿元,从事网上交易的商户有可能达到5000万”,。中国电子商务市场已经进入务实发展阶段。但在电子商务快速发展的同时,电子商务交易的信用危机也悄然袭
期刊
8月20日, 中国科协2005年学术年会在新疆乌鲁木齐开幕。6700多名来自科研、生产、教学第一线的科技工作者围绕“科学发展观和资源可持续利用”的大会主题展开了学术交流。  中共中央政治局委员、新疆维吾尔自治区党委书记王乐泉出席开幕式并讲话。王乐泉介绍了新疆维吾尔自治区成立50年来经济建设、资源开发和各项事业发展的主要情况。他指出,这次学术年会以“科学发展观与资源可持续利用”为主题,非常切合新疆
期刊