%0 Journal Article
%T Distributed astronomical cross-match based on MapReduce model<br>基于MapReduce模型的分布式天文交叉证认
%A 赵青
%A 孙济洲
%A 肖健
%A 于策
%A 崔辰州
%A 刘旭
%A 袁鳌
%J 计算机应用研究
%D 2010
%I 
%X 交叉证认是实现多波段数据融合的关键技术，目前还缺乏对其分布式算法的研究。快速增长的数据规模使该问题必须要依赖分布式并行计算技术解决。提出了一种基于MapReduce分布式模型的新方法，根据Map-Reduce的要点，尽量减少了任务间的通信量，并通过合理设置划分粒度保证了效率与存储间的平衡。实验结果表明，该方法对海量数据交叉证认的效率提升明显，在大规模集群上达到了接近线性的加速比。该方法为交叉证认提供了一种快速有效的解决途径。
%K astronomical cross-match
%K MapReduce
%K parallel computing
%K distributed computing<br>天文交叉证认
%K MapReduce
%K 并行计算
%K 分布式计算
%U http://www.alljournals.cn/get_abstract_url.aspx?pcid=5B3AB970F71A803DEACDC0559115BFCF0A068CD97DD29835&cid=8240383F08CE46C8B05036380D75B607&jid=A9D9BE08CDC44144BE8B5685705D3AED&aid=6DBC84BF199B8FEAD0F75AD5DDA04419&yid=140ECF96957D60B2&vid=DB817633AA4F79B9&iid=9CF7A0430CBB2DFD&sid=12A72C97E51D11EC&eid=C966DA0086D3268B&journal_id=1001-3695&journal_name=计算机应用研究&referenced_num=0&reference_num=7