Current Location:home > Browse

Submitted Date

Institution

1. chinaXiv:202001.00044 [pdf]

基于Spark的SKA1-MID自校准管线分布计算实现

戴伟; 汪森; 李秋虹; 邓辉; 梅盈; 王锋
Subjects: Astronomy >> Astrophysical processes

SKA 科学数据处理产生的数据超出了所有已存在的分布式处理系统的处理能力,如何实现一个分布式执行框架是当前科学数据处理的一个重要研究内容。Spark 是非常成熟的一个商业框架,在互联网应用中被广泛应用,本文根据SKA项目进展要求,重点研究了如何将算法参考库(ARL)中的部分管线移植到Spark上执行。本文对部分实现过程进行了分析讨论,给出了相应的任务流程实现。最终结果表明,移植后代码生成结果符合预期,Spark能够满足部分数据分布式数据的要求,但迫切需要解决自身存在的一系列问题。

submitted time 2019-12-26 From cooperative journals:《天文研究与技术》 Hits4913Downloads504 Comment 0

2. chinaXiv:201909.00186 [pdf]

基于python-casacore的射电测量集文件生成方法

孙浩民; 邓辉; 梅盈; 王锋
Subjects: Astronomy >> Astrophysical processes

测量集(MeasurementSet,MS)文件是成为射电天文领域的重要存储文件格式,并逐渐成为射电天文数据存储、分析与共享的标准格式,得到越来越多的天文数据处理软件如CASA、WSCLEAN等的支持,在ALMA、LOFAR等诸多射电望远镜系统中应用。但长期以来,MS格式在国内应用较少,技术规范文档非常缺乏。本文结合SKA工程桥接阶段相关工作需要,对MS格式的基本概念、目录结构和字段设计进行了介绍,在此基础上讨论了利用python-casacore调用底层casacore生成MS文件的方法,并将此功能封装到当前SKA的算法参考库(Algorithm Reference Library, ARL)。文中给出了利用ARL仿真观测生成MS文件的实例,并通过CASA软件对生成的MS文件成像,经过结果比对,验证了MS文件的正确性。本文的工作为SKA后续的成像实验、观测模拟和文件存储都提供了关键的保障,在满足SKA工程桥接阶段工作需要的同时,也为国内外射电天文数据处理工作提供了参考。

submitted time 2019-09-18 From cooperative journals:《天文研究与技术》 Hits1118Downloads555 Comment 0

3. chinaXiv:201812.00018 [pdf]

宽视场成像网格化算法中w-plane最优经验值研究

于晓雨; 邓辉; 梅盈; 卫守林; 石聪明; 王威; 戴伟; 王锋
Subjects:

射电干涉阵列宽视场成像网格化处理过程中必须考虑w项的影响。w-projection和w-stacking是两个重要的宽视场成像网格化处理算法, w-plane参数是算法中影响计算速度和成图质量的一个重要因素。本文研究了w-projection和w-stacking两种网格化算法,利用SKA1低频阵台站数据和ASKAP软件包进行模拟观测,对两种算法在不同w-plane参数取值情况下的成图速度和成图质量进行了定量分析对比。结果进一步表明w-plane是性能改善的重要参数,针对w-projection算法来说,w-plane取值应比一般给定的经验值要大才能较好的得到成像效果。w-stacking算法虽然有很大的速度优势,但算法实现中w-plane的影响更为显著,论文给出了推荐的w-plane取值。本文工作是大视场成像算法的基础研究工作,对未来SKA科学数据处理中的管线设计有较好的参考价值。

submitted time 2018-12-04 From cooperative journals:《天文研究与技术》 Hits2079Downloads864 Comment 0

4. chinaXiv:201812.00020 [pdf]

基于ZeroMQ的观测控制系统底层通信架构分析与测试

钱进; 邓辉; 梅盈; 石聪明; 卫守林; 戴伟; 王锋
Subjects:

观测控制系统(Observation Control System,OCS)是当前的一个研究热点,底层通信是OCS架构中重要的一个环节。但传统的OCS中一般采用裸套接技术实现,缺少统一的传输控制机制,在密集数据通信时经常存在延迟影响实时控制的需要; 同时缺少广播与组播机制,限制了OCS系统的设计。本文针对OCS的要求,系统研究分析了基于ZeroMQ不同通信模型及所对应的天文控制模式,对不同的通信控制架构可用性进行了分析。在此基础上通过实验对相应的通信模型进行了测试,验证其在天文仪器分布控制中的可用性。测试结果进一步说明ZeroMQ构建OCS的底层通信架构是可行的,能够满足OCS对设备的各种控制需求。

submitted time 2018-12-04 From cooperative journals:《天文研究与技术》 Hits1214Downloads657 Comment 0

5. chinaXiv:201812.00001 [pdf]

基于容器技术的天文应用软件自动部署方法

姚坤 ; 戴伟 ; 杨秋萍 ; 梅盈 ; 石聪明 ; 王锋
Subjects: Astronomy >> Astrophysical processes

平方公里阵望远镜(SKA)即将开始建设,各子工作包也将进入关键设计评估阶段。 基于云与容器技术是当前 SKA 科学数据处理器(SDP)未来可能采用的平台技术。本文针对 SDP 超大规模海量数据处理中所面临的天文应用软件快速部署、运行与实测要求,充分考虑 了天文应用软件运行环境复杂,云计算环境下超大规模计算集群部署困难等问题,系统研究 并给出了一种使用 Docker 技术的天文应用软件通用自动部署方法,论文以目前较为常用的 可见度函数校准软件 SAGECaL 为例,首先分析了 SAGECaL 的相关特性和分布式部署方面存在的困难,进而给出了基于 Docker 容器技术的 SAGECaL 分布式集群的自动部署方法。实验结果表明,本文所提出的自动部署方法极大地提高了 SAGECaL 分布式集群的部署效率,满足了项目组承担 SKA-SDP 相关测试工作中所需要的基础平台部署与切换等需求。同时,本工作也为其它天文软件在云端的快速部署与执行提供了有益的思路。

submitted time 2018-12-03 From cooperative journals:《天文研究与技术》 Hits1024Downloads479 Comment 0

6. chinaXiv:201806.00280 [pdf]

基于OpenCL的射电干涉阵成像gridding算法实现

冯勇1;王锋1,2,3;邓辉1,2;卫守林1;梅盈1,2,3;戴伟1,3;石聪明1
Subjects: Astronomy >> Astronomical Instruments and Techniques

天文软件开发与应用中迫切需要在单机环境下进行高性能的科学数据处理工作,由于机器配置不同,采用传统的CUDA+GPU技术存在明显的局限,不利于天文软件的快速移植和无缝运行。针对明安图频谱射电日像仪(MingantU SpEctral Radioheliograph,MUSER)数据处理中的网格化(Gridding)算法,采用并行计算OpenCL技术进行多线程编程实现。实验结果表明,基于OpenCL实现的gridding算法不仅能够在多种GPU上运行,而且能够在纯CPU上运行。当选择在GPU上执行时,算法的执行效率与基于CUDA实现的gridding算法执行效率大致相当,但算法不局限于NVIDIA GPU,解决了算法对CUDA+GPU的依赖;同时算法也能在纯CPU上较快速地执行,适用于单机模式下进行天文软件的开发和测试,也便于天文软件的应用与推广。

submitted time 2018-06-22 From cooperative journals:《天文研究与技术》 Hits4237Downloads819 Comment 0

7. chinaXiv:201805.00530 [pdf]

面向ONSET实时数据处理的图像选帧GPU技术实现

李力; 邓辉; 李瑧; 梅盈; 戴伟; 杨秋萍; 王锋
Subjects: Astronomy >> Astrophysical processes

光学和近红外太阳爆发监测望远镜每天可以获得大量的太阳图像数据,对这些观测数据进行实时选帧处理,一方面可以减轻存储压力,另一方面也可以提高后续图像重建的质量。针对实时观测过程中的选帧要求,设计并实现了一套基于图形处理器的图像选帧实时处理模块,当前的模块已经实现了平均梯度法和谱比法选帧两种算法的高速并行处理。对模块的实现进行了细致的讨论,并比较了两种选帧方法的加速比。实验表明,该模块运行稳定可靠;从执行效率来看,针对近全日面图像的选帧总体执行时间最快为1.2s,比原有串行实现提升了7倍;局部面图最快为0.7s,平均提升了5倍。整体模块的实现与当前性能已经可以满足实时观测与处理的要求。

submitted time 2018-05-29 From cooperative journals:《天文研究与技术》 Hits1382Downloads665 Comment 0

8. chinaXiv:201805.00159 [pdf]

一种基于多尺度带通滤波的洁化算法与GPU实现

梅盈; 邓辉; 张晓丽; 王锋; 陈腾达
Subjects: Astronomy >> Astrophysical processes

中国新一代频电频谱日像仪-明安图射电频谱日像仪(Mingantu Spectral Radioheliograph,MUSER)以高时间、高空间、高频率分辨率工作在0.4GHz~15GHz,为太阳爆发活动初始能量释放区的物理过程、太阳电子加速等研究开辟了新的窗口。高性能高质量太阳成像算法是MUSER数据处理流水线至关重要的研究内容。参考法国墨东天文台太阳干涉阵的数据处理方法,系统讨论分析了多尺度(Multi-Scale)CLEAN算法,给出了适用于MUSER的多尺度CLEAN算法参数,并重点讨论了算法的GPU并行。实验结果表明,改进的多尺度CLEAN在算法效率上比基于GPU实现的H?gbom CLEAN提高了近3倍,有效提高了整个MUSER数据处理流水线的性能。

submitted time 2018-05-15 From cooperative journals:《天文研究与技术》 Hits1047Downloads600 Comment 0

9. chinaXiv:201805.00079 [pdf]

MUSER 可见度数据积分方法与实现

赖 铖 ; 梅 盈 ; 邓 辉; 王 锋; 戴 伟
Subjects: Astronomy >> Astrophysical processes

射电观测是研究太阳活动的重要探测手段.我国明安图射电频谱日像仪(MingantUSpEctral Radioheliograph, MUSER)主要用于研究太阳爆发活动初始能量释放区的物理过程, 其观测将在太阳射电成像开辟一个新的窗口. 成像处理是数据处理的重要组成部分, 如何提高成像质量是当前数据处理的研究重点. 首先介绍了射电干涉成像的基本理论, 随后分析了对观测得到的可见度数据积分的必要性, 细致讨论了短时段可见度数据叠加求平均和长时段UV 覆盖叠加两种积分方法,并给出了完整的实现. 通过实现代码与实验验, 两种积分均可以有效提高信噪比, 图像质量明显提高.

submitted time 2018-05-09 From cooperative journals:《天文研究与技术》 Hits1020Downloads526 Comment 0

10. chinaXiv:201712.00928 [pdf]

胎膜早破对胎龄<37周早产儿并发症的影响

段顺艳; 孔祥永; 徐凤丹; 吕红艳; 巨容; 李占魁; 曾淑娟; 武辉; 张雪峰; 刘卫鹏; 刘芳; 程红斌; 丁艳洁; 陈铁强; 许平; 杨李红; 吴素静; 汪瑾; 彭立; 赵小林
Subjects: Medicine, Pharmacy >> Preclinical Medicine

目的 探讨胎膜早破(premature rupture of the membrane, PROM)对早产儿并发症的影响。方法 收取课题组各协作单位产科登记信息在2014年1月1日~2014年12月31日出生的胎龄<37周的早产儿共7684例。各协作单位派专人培训后填写统一的表格,记录相关信息,包括患儿性别、胎龄、出生体质量、有无PROM、胎盘早剥、产前激素使用、Apgar评分、羊水污染、并发症等。按有无PROM分为PROM组与对照组,统一对其临床资料进行分析。结果(1)PROM组病死率小于对照组,颅内出血、坏死性小肠结肠炎、早产儿视网膜病、支气管肺发育不良发生率均高于对照组,两组间比较差异均有统计学意义(P<0.05);OR值95% CI分析:病死率<1;颅内出血、坏死性小肠结肠炎、早产儿视网膜病、支气管肺发育不良并发症>1。(2)调整胎龄、出生体质量、性别、分娩方式、胎盘早剥、前置胎盘、产前激素、妊娠期糖尿病、妊娠期高血压病和5 min Apgar评分<7分等因素后,坏死性小肠结肠炎、早产儿视网膜病、支气管肺发育不良的发生率两组间差异均有统计学意义(P<0.05),且OR 95% CI>1,但病死率和ICH比较,差异均无统计学意义(P>0.05)。结论 PROM是早产儿并发症坏死性小肠结肠炎、早产儿视网膜病、支气管肺发育不良发生的危险因素,规范处理PROM可减少早产儿并发症NEC、早产儿视网膜病、支气管肺发育不良的发生。

submitted time 2017-12-27 From cooperative journals:《南方医科大学学报》 Hits894Downloads576 Comment 0

12  Last  Go  [2 Pages/ 16 Totals]