分类: 天文学 >> 天文学 提交时间: 2018-09-11 合作期刊: 《天文研究与技术》
摘要: 平方公里阵列(Square Kilometre Array,SKA)望远镜建成后将会具有超高的灵敏度、超快的巡天速度以及宽视场,进而产生超海量的观测数据。在SKA天文台与各国区域数据中心间的海量数据同步/传输是当前SKA建设中的一个难点。SKA先导项目使用的下一代归档存储系统(Next Generation Archive System, NGAS)在应用测试中存在效率低下,性能不足等问题。本文提出了一种基于ZeroMQ的数据存储与同步方法,通过采用更加高效的异步消息机制实现同步传输数据,回避了NGAS原有的采用HTTP协议的局限。实验结果表明新方法在平均数据归档存储效率方面比NGAS原有方法快了将近40倍,能够基本满足10GB带宽的全速传输需要,取得了较好的使用效果。
分类: 天文学 >> 天文学 提交时间: 2018-05-29 合作期刊: 《天文研究与技术》
摘要: 明安图射电频谱日像仪(MingantU SpEctral Radioheliograph, MUSER)目前已经进入常规观测,必将产生海量的观测数据。针对日像仪需要高效管理其产生的海量观测数据并提供高效检索服务的需求,负数据库管理系统提出并被应用到日像仪中。详细介绍了负数据库的接口设计与实现,并通过实验验证了所设计接口的有效性和性能。负数据库管理系统不仅可以有效解决其面临的问题,也可以为新一代望远镜负数据库管理系统提供参考。