Current Location:home > Browse

1. chinaXiv:202103.00137 [pdf]

应用于射电天文的高效实时管道数据流传输与处理技术

张萌; 张海龙; 王杰; 李健; 冶鑫晨; 王万琼; 李嘉; 王博群; 张亚州
Subjects: Astronomy >> Astrophysical processes

针对超宽带及多波束接收系统海量天文信号实时高效传输与处理问题,对基于FPGA+GPU的主流终端设备软件系统进行了测试分析,超宽带接收设备要求终端系统软件能够在更宽带宽,更高时间、频率分辨率条件下,实现实时数据流传输与处理。结合大口径射电观测设备未来发展方向提出了利用高速并行环形缓冲区实现数据流缓存、基于GPU集群实现数据流实时处理、基于BeeGFS实现分布式并行数据存储,模块化构建射电天文信号传输管道软件的设计思路。

submitted time 2021-03-30 From cooperative journals:《天文研究与技术》 Hits738Downloads208 Comment 0

2. chinaXiv:202012.00063 [pdf]

基于零拷贝的脉冲星GPU相干消色散算法

王博群; 张海龙; 王杰; 冶鑫晨; 王万琼; 李嘉; 张萌; 张亚州; 付鹏飞
Subjects: Astronomy >> Astrophysical processes

射电脉冲信号在传输过程中受到星际介质的影响会导致轮廓展宽和变形,在研究过程中需要对信号进行消色散处理。本文设计并实现了基于零拷贝的脉冲星数据GPU相干消色散算法,采用设备内存映射以消除主机到设备的拷贝开销,利用CUDA的cuFFT库进行多BATCH傅里叶变换以提高DFT效率,同时采用多线程实现了传递函数的加速计算。实验结果表明,与传统CPU及GPU算法相比,本文提出的算法在大数据量时表现良好。

submitted time 2020-12-21 From cooperative journals:《天文研究与技术》 Hits1066Downloads443 Comment 0

3. chinaXiv:201812.00152 [pdf]

新疆天文台天文观测数据传输日志系统设计与实现

朱艳(1,2); 张海龙(1,3); 冶鑫晨(1); 王杰(1); 王万琼(1); 托乎提努尔(1); 李嘉(1); 张萌(1,2)
Subjects: Astronomy >> Astrophysical processes

新疆天文台望远镜所产生的观测数据通过数据专线传输到台本部数据中心进行长期存储。采用rsync进行数据传输,过程中没有详细的日志记录信息,无法对传输情况进行统计分析。本文通过调研新疆天文台数据传输需求,设计并开发了新疆天文台观测数据传输日志系统。系统以新疆天文台南山站、奇台站的数据存储服务器和台本部长期存储为基础,设计了日志系统的整体架构,实现了数据传输过程的日志记录。系统基于shell多线程技术、qt框架开发了后台服务程序及日志系统软件界面,实现了日志分析、统计备份与数据传输可视化页面。

submitted time 2018-12-20 From cooperative journals:《天文研究与技术》 Hits4013Downloads749 Comment 0

4. chinaXiv:201811.00001 [pdf]

新疆天文台天文观测数据传输日志系统设计与实现

朱艳 ; 张海龙 ; 冶鑫晨 ; 王杰 ; 王万琼 ; 托乎提努尔 ; 李嘉 ; 张萌
Subjects: Astronomy >> Astrophysical processes

新疆天文台望远镜所产生的观测数据通过数据专线传输到台本部数据中心进行长期存储。采用rsync进行数据传输,过程中没有详细的日志记录信息,无法对传输情况进行统计分析。本文通过调研新疆天文台数据传输需求,设计并开发了新疆天文台观测数据传输日志系统。系统以新疆天文台南山站、奇台站的数据存储服务器和台本部长期存储为基础,设计了日志系统的整体架构,实现了数据传输过程的日志记录。系统基于shell多线程技术、qt框架开发了后台服务程序及日志系统软件界面,实现了日志分析、统计备份与数据传输可视化页面。

submitted time 2018-11-01 From cooperative journals:《天文研究与技术》 Hits2649Downloads853 Comment 0

5. chinaXiv:201806.00239 [pdf]

新疆天文台NSRT观测数据存储系统

张海龙; 朱艳; 聂俊; 袁建平; 吴刚; 刘俊; 王杰; 王万琼; 冶鑫晨; 托乎提努尔; 张萌
Subjects: Astronomy >> Astronomical Instruments and Techniques

新疆天文台南山26m射电望远镜(简称NSRT)经过多年观测积累了大量的科学数据。针对NSRT天文观测数据的在线存储与备份问题,建设了远程、异地、容灾备份系统,在新疆天文台本部及南山观测站分别建设了可独立运行的存储系统,实现了两套存储系统间的远程、异地数据实时容灾备份。以基于对象的存储技术Lustre为基础实现了存储系统,并对存储的读写性能进行了详细测试。建设的容灾备份系统有效解决了新疆天文台观测数据及次生数据的在线存储与数据安全问题。

submitted time 2018-06-21 From cooperative journals:《天文研究与技术》 Hits2237Downloads1300 Comment 0

6. chinaXiv:201711.01334 [pdf]

新疆天文台数据中心建设与应用

张海龙; 王杰; 王万琼; 聂俊; 冶鑫晨; 朱艳; 托乎提努尔
Subjects: Astronomy >> Astrophysical processes

经过多年观测,新疆天文台积累了大量珍贵的观测数据。如何高效管理快速增长的海量观测数据,如何实现全波段观测数据的融合及未来更大口径望远镜产生的海量数据归档与发布是目前新疆天文台急需解决的问题。新疆天文台数据中心面向天文学科研需求提供天文科学数据服务和基拙设施,由新疆天文台计算机技术室负责运行与维护。数据中心以最新的虚拟天文台相关标准为基拙建设,基本服务包括:为天文观测项目提供数据保存、管理和发布服务;为有价值的天文科学数据及二次处理后的数据提供长期保存和访问服务;为用户提供科学数据归档与发布服务及相关技术支持。数据资源主要有:新疆天文台25 m射电望远镜的脉冲星观测数据;活动星系核观测数据以及分子谱线观测数据。提供的数据服务有:PPMXL星表锥形检索;海量星表数据在线交又认证;统一内容描述符信息查询等服务。主要介绍新疆天文台数据中心建设及其提供的服务,如何使用已发布的服务在线检索数据及利用标准虚拟天文台工具实现数据操作。

submitted time 2017-09-26 From cooperative journals:《天文研究与技术》 Hits1651Downloads938 Comment 0

7. chinaXiv:201711.01319 [pdf]

天文数据检索与发布综述

张海龙; 冶鑫晨; 李慧娟; 王杰; 王万琼; 托乎提努尔; 聂俊; 崔辰州; 刘梁; 谌俊毅; 陈肖; 薛岩松; 何勃亮; 李长华; 赵青; 肖健; 樊东卫; 曹子皇; 李珊珊; 米琳莹
Subjects: Astronomy >> Astrophysical processes

海量观测数据及次生数据的高效存储与检索,天文大数据的快速及时处理,加速天文学研究的科学产出等问题,已成为天文观测和天文研究迫切需要解决的难题。以信息技术为支撑的天文大数据的高效分析和处理,帮助天文学家重新审视和了解宇宙。虚拟天文台的出现为全球范围内研究资源的无缝透明连接提供了协议、标准,以协议为基拙规范了天文数据的发布与检索方式。以国内外现有的观测设备为基拙,综述目前主流天文机构的数据发布与检索相关情况。

submitted time 2017-09-26 From cooperative journals:《天文研究与技术》 Hits2557Downloads1701 Comment 0

  [1 Pages/ 7 Totals]