基于Spark的大规模天文数据天区覆盖生成算法

来源 :天津科技大学学报 | 被引量 : 0次 | 上传用户:rambo0316
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
天区覆盖生成是天文数据归档中的重要一环,其结果对天文数据检索、计算等后续处理流程至关重要.由于天文数据的海量性,应用传统科学计算方法处理这一问题通常耗时较长,效率不高,且受存储空间的制约,扩展性差.为解决这一问题,本文提出了一种基于HEALPix索引和Spark框架的高效分布式天区覆盖生成算法.实验证明:该算法可以在短时间内完成大规模天文数据的天区覆盖生成,为实现海量天文数据的快速归档提供了支持;同时,所生成的结果还可以用于数据可视化,直观地展现星表中的天文数据在天区上的分布情况.
其他文献
随着国有商业银行在农村机构和业务的收缩,农村信用社作为农村金融的主力军,在农村经济结构调整过程中起着举足轻重的作用。本文就农村信用社信贷现状与农村经济结构调整之间的
采用网格变形和局部网格重构的动网格技术对超车过程进行二维瞬态模拟,并记录不同超车位置处的模拟数据.研究结果表明:相对超车速度增加,两车侧向力均增大;超车间距增大,两车
目的:探讨紫外线减毒血吸虫尾蚴免疫宿主的皮肤组织在抗攻击感染中的作用。方法:88只小鼠分为4组。1、2组分别以50±3条紫外线减毒日本血吸虫蚴免疫呈因吸虫尾蚴感染,5wk后以1000±100条尾
去年以来,我局党委站在践行“三个代表”重要思想的高度,站在民营兴县、招商富民的高度,紧紧围绕县委、县政府的中心工作,以发展经济为第一要务,与时俱进,坚持把招商企业的根本利益
研究新疆境内白岭的地域分布与地理景观的关系。综合白蛉地域分布的调查材料,配以各调查地点的景观特征,分析各种白蛉的地域分布格局与地理景观之间的关系。
通过浊度测定的方法研究温度对聚丙烯酸钠/十二烷基三甲(乙、丁)基溴化铵混合体系相行为的影响.研究发现:温度对该类体系产生了两种相反的影响.温度较低时,随着温度升高,体系浊
纠纷解决替代机制又称非诉讼纠纷解决机制(普遍采用的英文缩写是ADR)起源于美国,是对诉讼之外的一系列纠纷解决程序的统称,主要包括协商、调解和仲裁三种基本类型。如今世界各
目的:探讨重组日本血吸虫26kDa GST抗原免疫家兔后抗体水平动态变化。方法:家兔随机分为免疫组与佐剂对照组,免疫组用纯化重组日本血吸虫26kDa GST抗原加福氏佐剂免疫;佐剂对照组用0.85%盐水加福氏佐