Current Location:home > Browse

1. chinaXiv:201812.00152 [pdf]

新疆天文台天文观测数据传输日志系统设计与实现

朱艳(1,2); 张海龙(1,3); 冶鑫晨(1); 王杰(1); 王万琼(1); 托乎提努尔(1); 李嘉(1); 张萌(1,2)
Subjects: Astronomy >> Astrophysical processes

新疆天文台望远镜所产生的观测数据通过数据专线传输到台本部数据中心进行长期存储。采用rsync进行数据传输,过程中没有详细的日志记录信息,无法对传输情况进行统计分析。本文通过调研新疆天文台数据传输需求,设计并开发了新疆天文台观测数据传输日志系统。系统以新疆天文台南山站、奇台站的数据存储服务器和台本部长期存储为基础,设计了日志系统的整体架构,实现了数据传输过程的日志记录。系统基于shell多线程技术、qt框架开发了后台服务程序及日志系统软件界面,实现了日志分析、统计备份与数据传输可视化页面。

submitted time 2018-12-20 From cooperative journals:《天文研究与技术》 Hits3625Downloads538 Comment 0

2. chinaXiv:201811.00001 [pdf]

新疆天文台天文观测数据传输日志系统设计与实现

朱艳 ; 张海龙 ; 冶鑫晨 ; 王杰 ; 王万琼 ; 托乎提努尔 ; 李嘉 ; 张萌
Subjects: Astronomy >> Astrophysical processes

新疆天文台望远镜所产生的观测数据通过数据专线传输到台本部数据中心进行长期存储。采用rsync进行数据传输,过程中没有详细的日志记录信息,无法对传输情况进行统计分析。本文通过调研新疆天文台数据传输需求,设计并开发了新疆天文台观测数据传输日志系统。系统以新疆天文台南山站、奇台站的数据存储服务器和台本部长期存储为基础,设计了日志系统的整体架构,实现了数据传输过程的日志记录。系统基于shell多线程技术、qt框架开发了后台服务程序及日志系统软件界面,实现了日志分析、统计备份与数据传输可视化页面。

submitted time 2018-11-01 From cooperative journals:《天文研究与技术》 Hits2230Downloads593 Comment 0

3. chinaXiv:201806.00239 [pdf]

新疆天文台NSRT观测数据存储系统

张海龙; 朱艳; 聂俊; 袁建平; 吴刚; 刘俊; 王杰; 王万琼; 冶鑫晨; 托乎提努尔; 张萌
Subjects: Astronomy >> Astronomical Instruments and Techniques

新疆天文台南山26m射电望远镜(简称NSRT)经过多年观测积累了大量的科学数据。针对NSRT天文观测数据的在线存储与备份问题,建设了远程、异地、容灾备份系统,在新疆天文台本部及南山观测站分别建设了可独立运行的存储系统,实现了两套存储系统间的远程、异地数据实时容灾备份。以基于对象的存储技术Lustre为基础实现了存储系统,并对存储的读写性能进行了详细测试。建设的容灾备份系统有效解决了新疆天文台观测数据及次生数据的在线存储与数据安全问题。

submitted time 2018-06-21 From cooperative journals:《天文研究与技术》 Hits1694Downloads933 Comment 0

4. chinaXiv:201711.01334 [pdf]

新疆天文台数据中心建设与应用

张海龙; 王杰; 王万琼; 聂俊; 冶鑫晨; 朱艳; 托乎提努尔
Subjects: Astronomy >> Astrophysical processes

经过多年观测,新疆天文台积累了大量珍贵的观测数据。如何高效管理快速增长的海量观测数据,如何实现全波段观测数据的融合及未来更大口径望远镜产生的海量数据归档与发布是目前新疆天文台急需解决的问题。新疆天文台数据中心面向天文学科研需求提供天文科学数据服务和基拙设施,由新疆天文台计算机技术室负责运行与维护。数据中心以最新的虚拟天文台相关标准为基拙建设,基本服务包括:为天文观测项目提供数据保存、管理和发布服务;为有价值的天文科学数据及二次处理后的数据提供长期保存和访问服务;为用户提供科学数据归档与发布服务及相关技术支持。数据资源主要有:新疆天文台25 m射电望远镜的脉冲星观测数据;活动星系核观测数据以及分子谱线观测数据。提供的数据服务有:PPMXL星表锥形检索;海量星表数据在线交又认证;统一内容描述符信息查询等服务。主要介绍新疆天文台数据中心建设及其提供的服务,如何使用已发布的服务在线检索数据及利用标准虚拟天文台工具实现数据操作。

submitted time 2017-09-26 From cooperative journals:《天文研究与技术》 Hits1238Downloads692 Comment 0

5. chinaXiv:201711.01319 [pdf]

天文数据检索与发布综述

张海龙; 冶鑫晨; 李慧娟; 王杰; 王万琼; 托乎提努尔; 聂俊; 崔辰州; 刘梁; 谌俊毅; 陈肖; 薛岩松; 何勃亮; 李长华; 赵青; 肖健; 樊东卫; 曹子皇; 李珊珊; 米琳莹
Subjects: Astronomy >> Astrophysical processes

海量观测数据及次生数据的高效存储与检索,天文大数据的快速及时处理,加速天文学研究的科学产出等问题,已成为天文观测和天文研究迫切需要解决的难题。以信息技术为支撑的天文大数据的高效分析和处理,帮助天文学家重新审视和了解宇宙。虚拟天文台的出现为全球范围内研究资源的无缝透明连接提供了协议、标准,以协议为基拙规范了天文数据的发布与检索方式。以国内外现有的观测设备为基拙,综述目前主流天文机构的数据发布与检索相关情况。

submitted time 2017-09-26 From cooperative journals:《天文研究与技术》 Hits2005Downloads1330 Comment 0

  [1 Pages/ 5 Totals]