-
题名基于Spark的大规模天文数据天区覆盖生成算法
被引量:1
- 1
-
-
作者
熊聪聪
田祖宸
赵青
冯阔
崔辰州
-
机构
天津科技大学计算机科学与信息工程学院
中国科学院国家天文台
-
出处
《天津科技大学学报》
CAS
2018年第5期63-67,78,共6页
-
基金
国家自然科学基金资助项目(61402331
61402332)
天津市教委科研计划项目(2017KJ035)
-
文摘
天区覆盖生成是天文数据归档中的重要一环,其结果对天文数据检索、计算等后续处理流程至关重要.由于天文数据的海量性,应用传统科学计算方法处理这一问题通常耗时较长,效率不高,且受存储空间的制约,扩展性差.为解决这一问题,本文提出了一种基于HEALPix索引和Spark框架的高效分布式天区覆盖生成算法.实验证明:该算法可以在短时间内完成大规模天文数据的天区覆盖生成,为实现海量天文数据的快速归档提供了支持;同时,所生成的结果还可以用于数据可视化,直观地展现星表中的天文数据在天区上的分布情况.
-
关键词
SPARK
大数据
HEALPix
天文
天区覆盖
-
Keywords
Spark
big data
HEALPix
astronomy
sky coverage
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
P114
[天文地球—天文学]
-