分类: 天文学 >> 天文学 提交时间: 2021-05-27 合作期刊: 《天文研究与技术》
摘要: 望远镜自动化观测编排,是望远镜观测控制系统实现自主观测必不可少的组成部分。云南天文台40米射电望远镜需要对观测目标制定中长期和短期的纲要,目前对短期的目标进行纲要的编制时,主要依赖观测人员根据经验手动来实现,这种方式不仅低效耗时,更有可能会导致结果显著地偏离最优观测方案,不能充分利用望远镜宝贵的观测时间。本文使用混合整数线性规划模型,分析了云南天文台40米射电望远镜的短期观测目标的问题,定义了短期观测目标调度中的限制条件,以最小化望远镜的寻址时间作为目标函数,使用数学优化来解决射电望远镜短期观测目标编排问题,并在云南天文台40米射电望远镜上进行了测试,能较好地满足目前短期观测目标编排的需求。
分类: 天文学 >> 天文学 提交时间: 2021-03-30 合作期刊: 《天文研究与技术》
摘要: 快速傅里叶变换比傅里叶变换有更好的算法性能,是射电干涉成像基础算法,但因为天线阵列的不规则采样,需使用网格化算法将可见度数据重采样到规则的网格上,才能应用快速傅里叶变换。基于卷积的网格化计算具有计算密集型和迭代型的特点,特别是在处理海量可见度数据的情况下,高性能的网格化计算对加速整个成像过程就显得尤为重要。为了缓解数据处理的压力,在现有处理整块数据和支持多核计算的算法基础上,拓展应用Dask并行计算框架,不仅将数据分块并分配到多线程上,提高数值计算效率,而且动态的分布式任务调度策略优化了网格化的实时处理。实验结果表明多核CPU利用率显著提高,即使增加数据量,也能进一步提升网格化算法性能。分布式任务调度能够将(单)多测量集的网格化弹性缩放到(单)多机系统,充分发挥了集群的规模化优势。
分类: 天文学 >> 天文学 提交时间: 2020-11-12 合作期刊: 《天文研究与技术》
摘要: 随着巡天观测计划的进行,传统数据库技术无法满足海量天文数据的存储以及检索性能的需求。本文针对海量天文数据存储以及锥形检索时的高并发、高性能问题,采用数据库中间件技术,当海量数据到达传统数据库存储的阈值时,能够通过中间件技术以分库分表的形式存储到数据库集群中,充分整合关系性数据库和分布式技术的优点。在本文中,利用MySQL数据库集成DIF插件,在分布式数据库中建立伪球面索引,能够满足海量天文数据中锥形索引需求。
分类: 天文学 提交时间: 2018-12-04 合作期刊: 《天文研究与技术》
摘要: 射电干涉阵列宽视场成像网格化处理过程中必须考虑w项的影响。w-projection和w-stacking是两个重要的宽视场成像网格化处理算法, w-plane参数是算法中影响计算速度和成图质量的一个重要因素。本文研究了w-projection和w-stacking两种网格化算法,利用SKA1低频阵台站数据和ASKAP软件包进行模拟观测,对两种算法在不同w-plane参数取值情况下的成图速度和成图质量进行了定量分析对比。结果进一步表明w-plane是性能改善的重要参数,针对w-projection算法来说,w-plane取值应比一般给定的经验值要大才能较好的得到成像效果。w-stacking算法虽然有很大的速度优势,但算法实现中w-plane的影响更为显著,论文给出了推荐的w-plane取值。本文工作是大视场成像算法的基础研究工作,对未来SKA科学数据处理中的管线设计有较好的参考价值。
分类: 天文学 提交时间: 2018-12-04 合作期刊: 《天文研究与技术》
摘要: 观测控制系统(Observation Control System,OCS)是当前的一个研究热点,底层通信是OCS架构中重要的一个环节。但传统的OCS中一般采用裸套接技术实现,缺少统一的传输控制机制,在密集数据通信时经常存在延迟影响实时控制的需要; 同时缺少广播与组播机制,限制了OCS系统的设计。本文针对OCS的要求,系统研究分析了基于ZeroMQ不同通信模型及所对应的天文控制模式,对不同的通信控制架构可用性进行了分析。在此基础上通过实验对相应的通信模型进行了测试,验证其在天文仪器分布控制中的可用性。测试结果进一步说明ZeroMQ构建OCS的底层通信架构是可行的,能够满足OCS对设备的各种控制需求。
分类: 天文学 >> 天文学 提交时间: 2018-09-11 合作期刊: 《天文研究与技术》
摘要: 平方公里阵列(Square Kilometre Array,SKA)望远镜建成后将会具有超高的灵敏度、超快的巡天速度以及宽视场,进而产生超海量的观测数据。在SKA天文台与各国区域数据中心间的海量数据同步/传输是当前SKA建设中的一个难点。SKA先导项目使用的下一代归档存储系统(Next Generation Archive System, NGAS)在应用测试中存在效率低下,性能不足等问题。本文提出了一种基于ZeroMQ的数据存储与同步方法,通过采用更加高效的异步消息机制实现同步传输数据,回避了NGAS原有的采用HTTP协议的局限。实验结果表明新方法在平均数据归档存储效率方面比NGAS原有方法快了将近40倍,能够基本满足10GB带宽的全速传输需要,取得了较好的使用效果。
分类: 天文学 >> 天文学 提交时间: 2018-05-28 合作期刊: 《天文研究与技术》
摘要: 望远镜自主控制是现代天文观测技术的重要组成部分,在当前主流的自主控制系统中,开源的RTS2具备模块化和即插即用的设计理念,且具有快速响应能力和稳定工作的特点,被广泛应用于天文望远镜自主控制系统。由于RTS2基于Linux平台,主要基于CLI进行远程访问控制,所以对观测人员的要求比较高。深入分析RTS2系统,对JSONAPI进行适度改造,以JSON为数据传输格式,以移动终端的微信应用作为载体,跨越不同平台对RTS2天文望远镜控制系统进行数据访问和功能调用。利用微信小程序,将控制系统移植到微信小程序中,使天文技术研究人员能够方便快捷地利用移动终端在微信平台上远程控制天文望远镜和实时监控天文望远镜自主控制系统的状态。采用该模式,可扩展到ASCOM等其他自主控制架构,从而实现一个通用的基于微信小应用的移动终端远程控制。
分类: 天文学 >> 天文学 提交时间: 2018-05-15 合作期刊: 《天文研究与技术》
摘要: 随着天文技术的进步,天文望远镜系统组件日趋于复杂化,望远镜自动控制系统已成为望远镜进行常规观测的核心组成部分。通常执行一个完整的观测计划需要不同设备之间相互配合,协同工作,因此,具有一个高效的底层通信框架是望远镜自动控制系统成功的关键。ZeroMQ是一个高性能的网络通信程序库,提供了多种基础的通信模型,可用于构建复杂的分布式程序,非常适合天文望远镜观测控制这样的分布式、多种通信模式并存和低延迟要求的场合。回顾了在望远镜控制系统中广泛使用的CORBA,DCOM,原生Socket等网络技术,给出了基于ZeroMQ的新一代望远镜自动控制系统通信框架的总体设计,讨论了套接字设计、消息模型设计、序列化等关键技术的解决方案。
分类: 天文学 >> 天文学 提交时间: 2017-10-20 合作期刊: 《天文研究与技术》
摘要: 我国明安图射电频谱日像仪(Mingantu Ultrawide SpEctral Radio Heliograph, MUSER)已经完成所有的硬件设备安装与调试,即将进入常规观测。为有效地保证观测数据的可用性,项目组购置了Vantage Pro自动气象站,用以实时监控观测地的气象条件变化。首先介绍了MUSER项目的基本情况,论述了在项目中气象条件的应用场景及在数据处理时对数据有效性可能造成的影响;详细介绍了Vantage Pro气象站的数据采集格式、数据交换格式以及串行通信协议;介绍了在气象数据的存储方式;最后给出了构建气象数据服务、数据归档和高效查询的方法。可以应用在望远镜自动气象监控和数据处理方面,也可以为选址的自动气象监测提供春考
分类: 天文学 >> 天文学 提交时间: 2017-09-26 合作期刊: 《天文研究与技术》
摘要: 目前天文观测中对数据的实时处理需求越来越多,性能要求也越来越高,我国明安图射电频谱日像仪(MingantU SpEctral Radioheliograph, MUSER)是同时以高时间、高空间和高频率分辨率对太阳进行射电频谱成像的设备。在低频部分的日常观测中,包含了两方面的需求:(1)对历史数据的处理;}2) 5秒钟抽样观测数据的处理。抽样观测数据需要实时处理,并在监控终端显示,数据处理过程包含了数据校验、修正、成图、洁化等多个步骤,传统的单机处理模式已无法满足大数据量下的实时性要求。因此,实时数据计算中,使用Spark Streaming流式计算这一新兴的分布式计算方法,设计了自定义的接收器,并将多个图形处理器节点加入到分布式集群中。通过实验对性能进行评估,结果证明基于内存的高速执行引擎的特点能显著提高性能。期待能通过实验进一步优化算法和配置,获得更好的结果,并最终运用到实际环境中。
分类: 天文学 >> 天文学 提交时间: 2017-09-26 合作期刊: 《天文研究与技术》
摘要: 天文远程监控是天文研究的重要组成部分。为及时发现由于天气原因、电磁干扰、天线故障等导致的异常数据,提高数据处理的可靠性,我国明安图频谱射电日像仪迫切需要实现实时观测状态的远程监控。提出了一种基于WEBSOCKET技术的远程监控数据的可视化展现方法,并以观测过程中功率图和频谱图的实时展现为例进行了验证。实验表明,方法可满足实时监控数据可视化展现需求,并且改变了传统的现场监控模式,打破了地域限制,具有可靠性高、实时性好和扩充性广等诸多优点,提高了工作效率和设备利用率,对其它远程监控数据可视化展现系统有一定的参考价值。
分类: 天文学 >> 天文学 提交时间: 2017-09-26 合作期刊: 《天文研究与技术》
摘要: 天文数据处理是天文研究的一个重要环节。随着新一代望远镜功能与观测能力的快速发展,在观测地点构建高性能实时计算平台,快速完成数据的分析与处理是一种趋势针对明安图射电频谱日像仪和明安图观测站实时数据处理系统的建设要求,系统研究了基于OpenStack的本地云实现方法与系统自动管理模式,提出了动态进行计算节点启停的方法,并进行了实际测试。实验表明,该模式完全可以满足天文数据处理的需求,并且比传统的静态分配计算资源的数据处理方法更高效,可以有效地节省能源开销,降低观测成本,对未来天文台站高性能计算平台的建设有一定的参考价值。
分类: 天文学 >> 天文学 提交时间: 2017-09-26 合作期刊: 《天文研究与技术》
摘要: 明安图射电频谱日像仪(Mingantu Ultrawide SpEctral Radioheliograph, MUSER)已经完成硬件建设,与之配套的数据处理系统也初步开发完成。为提高用户操作的可用性,简化操作难度,数据处理系统在提供传统的命令行用户界面的同时,也提供了网络交互方式。简单介绍了Web.py的基本概念和内部组件交互流程,讨论了基于Web.py进行网络开发的方法和流程,并利用 Web.py框架实现了数据处理系统的网络界面交互。成果已经应用,提高了日像仪数据处理系统的可用性,也为其它天文软件系统的开发提供了一定的借鉴与参考价值。