天文数据索引技术综述
Astronomical data indexing technologies review
查看参考文献35篇
文摘
|
信息技术、制造技术的蓬勃发展为提高射电望远镜灵敏度和分辨率奠定了基础.随着观测设备接收面积的增大及多功能数字终端技术的发展,天文观测设备的数据收集能力也得到了大幅提升,天文数据已经进入了PB量级时代.然而海量的观测数据并非全部实现了全世界范围的开放共享.部分新投入或正在建设中的大型天文观测设备在设计过程中并没有充分考虑到数据管理问题;已有的观测数据采用离线存储在磁盘或磁带上没能实现数字化;发表的文章所用到的数据没有进行有效归档,使他人无法重复数据处理;部分国家或地区的网络限制使科研人员无法在线获取归档数据.本文以目前主流的单天线和阵列射电望远镜为基础,综述各观测设备现状及数据管理相关情况.以虚拟天文台相关协议标准为依据介绍如何通过最新的虚拟天文台(Virtual Observatory, VO)技术实现数据发布及无缝透明的资源连接与访问.分析了目前常用的索引技术B-Tree, R-Tree, HTM, HEALPix, Q3C的特点,最后给出针对新疆奇台110 m射电望远镜数据管理方面可选择的关键技术. |
其他语种文摘
|
The rapid development of information and manufacturing technologies has laid a solid foundation to improve antenna sensitivity and resolution. With the increasing antenna receiving area of astronomical facilities and the advancement of multi-functional digital back-end technologies, data collection capability has been enhanced greatly, and the astronomical data have been entered the Petabyte era. However, not all of the massive observational data are shared worldwidely. Data management issues are underestimated in the design procedure of some new or under-construction large astronomical facilities, some existing observational data are stored offline on disks or tapes, which are not digitized yet. Some data used by published papers are not archived validly, so that others cannot duplicate the results. And researchers in some countries or regions cannot get online data due to the network limitation. This paper reviews current status of observational facilities and data management based on mainstream single-dishes and arrays, introduces how to realize data publishing and seamless transparent access to resources with the latest VO technologies, analyzes the most used B-tree, R-Tree, HTM, HEALPix and Q3C indexing technologies, and at last, gives the suggestions for the massive data management of Xinjiang Qitai 110 m radio telescope. |
来源
|
中国科学. 物理学
, 力学, 天文学,2017,47(5):059505-1-059505-13 【核心库】
|
DOI
|
10.1360/SSPMA2016-00308
|
关键词
|
天文数据
;
索引
;
虚拟天文台
;
射电望远镜
|
地址
|
1.
中国科学院新疆天文台, 中国科学院射电天文重点实验室, 乌鲁木齐, 830011
2.
中国科学院新疆天文台, 乌鲁木齐, 830011
3.
天津科技大学计算机科学与信息工程学校, 天津, 300222
|
语种
|
中文 |
文献类型
|
综述型 |
ISSN
|
1674-7275 |
学科
|
天文学 |
基金
|
国家973计划
;
国家自然科学基金
;
中国科学院青年创新促进会、西部之光项目
;
天文学科技领域云项目
;
中国科学院天文台站设备更新及重大仪器设备运行专项经费资助
|
文献收藏号
|
CSCD:5967527
|
参考文献 共
35
共2页
|
1.
Wielebinski R. The Effelsberg 100-m radio telescope: Construction and forty years of radio astronomy.
J Astron Hist Heritage,2011,14:3-21
|
被引
1
次
|
|
|
|
2.
Winkel B. The Effelsberg-Bonn HI survey: Data reduction.
Astrophys J S Suppl,2010,188:488-499
|
被引
2
次
|
|
|
|
3.
Hobbs G. The parkes observatory pulsar data archive.
Publ Astron Soc Aust,2011,28:202-214
|
被引
7
次
|
|
|
|
4.
Khoo J. Using the Parkes Pulsar Data Archive.
Astron Res Tech,2012,9:229-238
|
被引
7
次
|
|
|
|
5.
Tofani G. Status of the Sardinia radio telescope project.
Proceedings of the SPIE Astronomical Telescopes Instrumentation,2008
|
被引
1
次
|
|
|
|
6.
Pisano J. ALMA correlator real-time data processor.
Proceedings of the 10th International Conference on Accelerator and Large Physics Control Systems,2005
|
被引
1
次
|
|
|
|
7.
Roy J. A real-time software backend for the GMRT.
Exp Astron,2010,28:25-60
|
被引
1
次
|
|
|
|
8.
Prasad J. FLAGCAL: A flagging and calibration package for radio interferometric data.
Exp Astron,2012,33:157-171
|
被引
3
次
|
|
|
|
9.
Alexov A. Status of LOFAR data in HDF5 format.
Proceedings of the Astronomical Data Analysis Software and Systems XXI,2012
|
被引
1
次
|
|
|
|
10.
Dewdney P E. The square kilometre array.
Proc IEEE,2009,97:1482-1496
|
被引
31
次
|
|
|
|
11.
吴曼青. 世界最大综合孔径望远镜SKA低频数字阵列系统研究.
中国科学: 信息科学,2015,12:1600-1614
|
被引
1
次
|
|
|
|
12.
彭勃. 持续参与世界最大综合孔径望远镜SKA国际合作.
中国科学: 物理学力学天文学,2012,42:1292-1307
|
被引
8
次
|
|
|
|
13.
Calimlim M. A vision for PetaByte data management and analyis services for the arecibo telescope.
IEEE Data Eng Bull,2004,27:12-20
|
被引
1
次
|
|
|
|
14.
南仁东. FAST的进展——科学、技术与设备.
中国科学: 物理学力学天文学,2014,44:1063-1074
|
被引
11
次
|
|
|
|
15.
崔辰州. 虚拟天文台的技术进展.
天文学进展,2002,20:302-311
|
被引
6
次
|
|
|
|
16.
赵永恒. 从虚拟天文台到天文信息学.
科研信息化技术与应用,2011,2:3-12
|
被引
4
次
|
|
|
|
17.
Norris R. Astronomical data management.
arXiv: astro-ph/0611012
|
被引
1
次
|
|
|
|
18.
Arviset C. IVOA architecture.
arXiv: 1106.0291
|
被引
1
次
|
|
|
|
19.
Roeser S. The PPMXL catalog of positions and proper motions on the ICRS. Combining USNO-B1.0 and the two micron all sky survey (2MASS).
Astronl J,2010,139:2440-2447
|
被引
33
次
|
|
|
|
20.
马友忠. 云数据管理索引技术研究.
软件学报,2015,26:145-166
|
被引
20
次
|
|
|
|
|