在大规模科学数据共享以及大型企业应用中存在海量的数据库。由于系统的定制性和历史原因,造成了这些数据库共享存在以下难题:封闭性、数据孤岛、缺乏规范和标准。中医药科技数据库群的共享正是大规模数据共享的一个例子。 为了解决异质异构数据的集成与共享,浙江大学网格实验室于2002年起开始研制用语义与网格技术来解决这个难题,并于2003年底推出了DartGrid V1,实现了用语义集成数据的基本理念并投入应用。此后我们一直在改进、扩充DartGrid V1的功能、稳定性与性能,并于2005年推出了DartGrid V3。 新的DartGridV3完全改造了已有DartGrid的内核,使它的稳定性、性能得到了本质的提高,集成的数据也更全面。DartGridV3还扩充了新的功能:将语义集成的理念推广到了全文检索系统,使语义技术与当今最热门的搜索技术相结合,使数据的搜索比以前更加方便快速;同时它还提供了强大的Web应用支持,使整个查询构造、查询处理等功能都可以在Web浏览器上完成,从而使DartGrid系统更加贴近最终用户、更加实用。 本人负责整个数据库全文检索引擎和基于DartGrid V3的Web查询处理系统的开发。将语义技术与全文检索引擎相结合来集成异质异构数据库的查询是一个不错的创意,而在全文检索系统中设计的全新的中文分词算法更是一个很好的创新。当然在开发过程中还有很多工程上的设计和思想,也是对我工程开发过程的很好的总结。以中医药数据库做切入点,全文检索系统已经在中国中医研究院成功运行了。 本文介绍了整个DartGrid V3的基本设计理念和解决方案、基于DartGrid V3的Web查询平台的设计、基于语义的数据库全文检索系统的设计和我自己设计的中文分词算法—树状词库法的思想和实现。