一种轻量化高可靠分布式数据处理架构

针对航天型号体系化高带宽智能总线数据的实时处理需求和现有架构数据整理耗时、运维复杂等问题,开展轻量化的高可靠分布式处理架构研究。通过构建元数据模型库和数据解析器完成数据的清洗和转换;采用基于ORC文件格式的分布式文件系统替代原有Hbase分布式列存储方案,增强平台的易用性和可靠性;基于Spark内存计算模型提升平台的计算、分析能力,结合数据流分片存储机制和索引库实现数据查询的优化加速。该分布式处理架构已应用到某装备系统中,保证了系统高密度试验数据的快速处理、稳定存储和高可靠应用,为高带宽实时数据的快速处理和管理提供了一种解决方案。     

一种基于OpenMP多核并行机制的基带数据处理方法

针对遥感卫星地面基带处理速率低、效率不高、稳定性差等问题，提出一种基于OpenMP多核并行机制的基带数据处理方法。通过在系统平台上建立多个线程，将数据处理分解到多线程中进行并行处理。以真实的卫星数据作为测试源，在压缩比为4∶1和无损模式下，从时间、解码速度、CPU占用、内存、设备资源利用率等指标对基带处理方法性能进行评估。评估结果表明，基于OpenMP并行化处理方法的解压缩软件，在充分利用硬件平台性能的基础上，实现了4倍解压缩速率的提升，显著提升了实时性。     

多格式载荷数据处理与管理平台的设计和实现

为了解决现有航天器载荷数据处理软件灵活度差、处理效率低的问题,设计了一种基于多级解包预处理策略以及并行处理调度算法的多格式载荷数据处理与管理平台。通过在某卫星的载荷试验数据处理与存储管理任务中的应用,验证了该平台设计的可行性和有效性。研究结果可为航天器多种格式的载荷数据并行处理与统一管理提供参考。     

试验数据管理平台设计研究

为了解决试验数据管理中面临的4方面问题,需建立基于关系数据库的试验数据管理平台.设计该平台需首先对试验数据管理平台设计需求进行全面分析梳理,基于软件4个方面的需求和软件设计思想,设计试验数据管理平台框架,平台框架的3个层面内容包括：数据访问层、业务逻辑层及界面展现层,搭建、配置及实现完成试验数据管理平台软件部分同时根据该平台软件性能需求配置与之匹配的硬件设备.针对试验数据管理平台开发设计中涉及的4项关键技术进行简要介绍,包括数据库架构设计、数据解析存储技术、数据查询、统计技术及数据协同类比分析技术.基于试验数据管理平台进行应用,实现海量试验数据存储,关键参数统计比对、包络线分析,数据分类解析导入与规范输出,试验资源管理.     

基于离散数据的可变流量固冲发动机性能分析软件

应用Matlab的GUI平台开发了基于离散数据的固冲发动机性能分析软件PERFORMANCE SHOW,它以发动机性能计算获得的离散数据为输入,采用多维插值、多项式拟合、多项式求根、等值面计算、逻辑运算等方法,能够获得描述发动机工作特性的曲线、曲面和实体,从而可对发动机性能进行多维度深入分析。PERFORMANCE SHOW软件界面友好,使用简便,适合于各类冲压发动机的性能分析。     

大数据技术综述与发展展望

以大数据、云计算等为代表的新一代信息技术正拉开中国航天数字化能力建设的崭新篇章,数据治理工作正处在勇开新局的关键时期。如何合理应用大数据存储、处理、分析、管理、流通与安全技术,构建航天大数据基础平台传输架构、存储架构及技术架构,保障数据治理规划与标准框架落地,沉淀航天数据资产,构建与航天型号研制体系特点相匹配的数据应用,是一个重要的命题。总结提炼了大数据的主要特征,全面梳理大数据技术体系,并面向不同数据处理场景,归纳适用的大数据技术手段,为航天数据治理的技术架构设计、技术选型等工作推进奠定坚实基础。     

遥测终端数据处理设备的数据预处理软件

本文概括叙述了遥测终端数据处理设备的数据预处理特点。它用软件进行数据检索、分路、检验,提高了整个系统的可靠度与灵活性。软件数据预处理使得该设备既有较大的应变能力,又便于扩充功能。     

基于Hadoop平台的XML Twig查询处理方法

为解决半结构化XML大数据的处理分析问题,分析了Twig查询结构特点和Hadoop平台架构特征。基于Hadoop平台,通过对XML数据的水平切分,设计了XML数据在HDFS上的分布式存储策略;将Twig查询分解为线性路径,实现了基于MapReduce编程模型的并行查询方法。最后通过实验验证了该方法的有效性。     

天基海量电磁数据深度处理服务平台

当前电子侦察数据呈现爆炸式增长,如何挖掘电子侦察的潜力,提升应用效能是当前电子侦察技术研究面临的关键问题.海量电磁数据深度处理平台以大数据技术为手段,利用云存储、云计算构建海量电磁数据的大数据深度处理框架,通过数据抽取、知识图谱构建、数据规律挖掘等关键技术,实现基于电磁信息的战场目标状态与意图预测,可有效提高电子侦察在现代信息作战中的重要性,提升电磁情报对战略、战役、战术的支援能力.     

用现成微处理机完成复杂的遥测预处理

本文介绍一个以微处理机为主机的系统,用以对复杂的高速遥测数据进行预处理。所用的微机是最新式的Motoroloa68020系列计算机。本文全面介绍系统的硬件和软件,并对所用的复杂算法和有关的数据处理作了说明。着重报道涉及参数容量和数据吞吐率的测试结果。对系统的体系结构采用多种通用的折衷法进行了分析,本系统把兆字极的遥测数据(如废点剔除、相位对齐和参数推导等)预处理技术推向新的高度。     

一种基于数据驱动的装备信息系统软件快速设计框架

针对装备信息系统类软件特点,提出了一种基于数据驱动的软件设计框架.该框架采用数据土壤生成服务森林的核心设计思想,形成一套快速实现该类软件的设计模式,以及面向表单型、流程型、可视化型等常用业务类型开发的辅助工具,支撑软件的敏捷构建.针对装备数据的异构多源特性,与框架配合提出了面向装备信息的数据规范模型,支撑设计框架的通用...     

高性能遥感卫星地面预处理系统中的任务管理与调度技术研究

任务调度和管理是遥感卫星数据地面预处理系统设计中的核心技术.如何对于新型的基于并行机群平台的遥感卫星数据预处理系统进行有效的任务管理和调度,将对系统的可用性、可扩展性以及性能等产生很深的影响.文章讨论一种成功应用于通用高性能卫星地面预处理系统(GHIPS)中的、基于机群平台的任务管理与调度技术.并用于指导为高性能遥感数据处理平台提供一种通用的任务管理与调度解决方案.     

基于国产化服务器集群的海量数据处理负载均衡技术

国产服务器可控性强、安全性高,但处理性能较国外产品有较大差异。通过搭建国产服务器集群,可以达到所需的处理性能,但需要解决集群内负载均衡的问题。为改善目前航天海量数据处理服务器集群负载不均的现状,本文提出"动""静"结合的负载均衡方法。在数据接收环节采用静态负载均衡,利用LVS进行任务调度;在数据处理环节采用动态负载均衡,根据数据流量和服务器负载来分配处理任务。实验结果表明,该方法可以有效地均衡集群中各个服务器的负载。     

基于国产操作系统的软件测试方法研究

国内软件研发平台的国产化趋势,使提高国产操作系统平台下软件的质量已经成为软件测试领域所面临问题的重中之重。通过对中标麒麟操作系统(Kylin)和锐华嵌入式实时操作系统(ReWorks)的发展现状与使用特点的介绍,结合雷达实际人机软件及数据处理软件的开发环境,对基于国产操作系统的软件测试方法进行研究,分析测试结果,总结软件测试方法设计、应用及实践的过程。     

遥测快速处理系统的设计与实现

阐述实现遥测快速处理系统的必要性,介绍系统的组成、数据库的设置、数据预处理、数据分路和计算、数据打印绘图等各部分的功能。最后总结快速处理的优点和不足,提出遥测数据处理的新方式     

MeasurementStudio在便携式高速数据采集系统中的应用

针对目前便携式数据采集系统需要快速、准确处理大量数据的要求和特点,提出了基于MeasurementStudio工具软件在高性能PC上进行数据处理的应用软件方案,解决了嵌入式硬件计算性能不足,存储空间小,实时处理性能弱,用户界面设计繁琐的难题。本设计以FPGA为控制核心,通过高精度ADC采集多路电压信号,利用高速单通道USB FIFO桥接芯片FT232H,以高达40MB/s的数据传输速率上传测量数据到PC。依托NET平台,使用完全面向对象的C#编程语言和NI性能优异的数据处理库及专业的工程UI控件库,分析测量数据并开发用户界面。该研究对于未来便携式数据采集系统的设计具有参考价值。     

敏捷卫星姿态机动过程分析与可视化判读平台设计

针对传统的成像姿态及姿态角速度的判读方式不再适用于敏捷卫星复杂姿态机动测试的问题,提出了一种基于实时测试场景的载荷对地成像轨迹计算方法,以Matlab软件为计算平台,实现成像轨迹、地面成像点(简称成像点)移动速度等多项指标数据的实时判读;利用Matlab与STK软件双向通信技术,开发了基于STK软件的实时数据可视化判读平台。整星测试结果表明:该平台实现了敏捷机动复杂过程分析与可视化判读,为开展整星综合测试和在轨任务分析提供了理论参考和实用工具。     

法国遥感卫星SPOT数据1A级预处理技术

航天遥感原始数据的预处理是建立地面数据应用工程运行系统的关键技术之一。在１Ａ级预处理中，需要解决处理任务组织和系统环境支持问题，需要完成数据回放、相对辐射校正、景地理坐标计算作业，这些问题的解决方法对遥感数据处理技术具有一定普遍意义。本文还介绍了一种数据预处理系统。     

应用相变储能板的星载数据处理器热设计

某星载数据处理器采用标准机箱结构,实现整星对地遥测数据的存储与传输的功能。数据处理器总热耗较大,其中有3个数据处理单元在工作时热耗高达70W。针对数据处理单元的周期性工作特点,填充有相变材料的储能板作为其散热措施使用。在数据处理单元工作时储热,间歇时散热,实现对数据处理单元的温度控制。为了验证该热设计措施的有效性,采用Flotherm软件进行仿真分析并设计了真空下的瞬态热平衡试验。仿真和试验结果均证明热设计方案合理,该相变储能板可以适应数据处理单元周期性工作的需求,且其内部所有元器件均满足一级降额设计要求。这种热设计方法为后续该类型周期性工作的大热耗单元热设计提供了参考意义。     

基于大数据的空间目标监测数据管理系统设计与应用

针对空间目标探测与识别试验系统监测站(简称监测站)海量目标识别数据管理效率不高、数据分析处理能力不足、观测数据使用效益未完全发挥、对系统服务性能提升贡献度不高的现状,利用Hadoop等大数据技术开发具备数据存储管理、分析挖掘、质量评估等功能的平台,建立系统设备性能状态主动受控式预警系统,解决了海量观测数据存储管理的难题。同时,综合利用大数据分析结果,挖掘探索监测数据相关性与影响规律,为提升空间目标监测系统服务性能提供可靠支撑。