论文部分内容阅读
MapReduce是一种大规模分布式并行处理框架，最初被用于互联网服务中的海量数据处理，并逐渐扩展到各个行业领域。目前，虚拟天文台面临着越来越多的地面及空间望远镜观测到的海量天文数据。为了提高中国虚拟天文台数据节点处理海量天文数据的能力，首次提出基于MapReduce框架构建中国虚拟天文台数据节点的方法，并以批量星表交叉认证为例描述了具体实现过程，性能评估结果证明基于MapReduce框架构建虚拟天文台数据节点，可以在性能、扩展性与成本等多方面获得收益。