基于元数据分离的数据管理体系结构及应用研究
网络安全与数据治理 10期
周俊鹏,任德旺,倪 鑫,李丽娜,李亚晖,李运喜
(1.航空工业西安航空计算技术研究所,陕西西安710068; 2.机载弹载计算机航空科技重点实验室,陕西西安710065)
摘要:针对现有嵌入式工业计算设备的数据分散、管理不足等问题,提出了一种基于元数据分离的数据管理体系结构。融合数据特性需求,设计了一种数据统一标准化处理的规则库,构建了元数据信息组织模型、索引存储结构及标准格式的数据文件,实现了数据文件与元数据分离存储的管理模式,将数据文件存储至索引目录磁盘,元数据信息实时写入时序数据库。初步开发了数据管理的应用原型系统,提升以元数据模型为基准的数据分级组织管理能力,实现数据互联互通,提高以业务为导向的数据管理应用服务效能。
中图分类号:TP311.5
文献标识码:A
DOI:10.19358/j.issn.2097-1788.2023.10.004
引用格式:周俊鹏,任德旺,倪鑫,等.基于元数据分离的数据管理体系结构及应用研究[J].网络安全与数据治理,2023,42(10):23-27.
文献标识码:A
DOI:10.19358/j.issn.2097-1788.2023.10.004
引用格式:周俊鹏,任德旺,倪鑫,等.基于元数据分离的数据管理体系结构及应用研究[J].网络安全与数据治理,2023,42(10):23-27.
Research on data management architecture and application based on metadata separation
Zhou Junpeng 1,2,Ren Dewang 1,2,Ni Xin 1,2,Li Lina 1,2,Li Yahui 1,2,Li Yunxi 1,2
(1.Xi′an Aeronautics Computing Technique Research Institute, AVIC, Xi′an 710068, China; 2.Aviation Key Laboratory of Science and Technology on Airborne and Missileborne Computer, Xi′an 710065, China)
Abstract:Aiming at the problems of data dispersion and insufficient management of existing embedded industrial computing equipment, this paper proposes a data management architecture based on metadata separation. Converged the requirements of data features, a rule base for unified and standardized processing of data is designed, the metadata information organization model, index storage structure and standard format data files are constructed, and the management mode of separate storage of data file and metadata is realized. The data file is stored to the index directory disk, and the metadata information is written to the time series database in real time. The application prototype system of data management is preliminarily developed, to improve the capability of hierarchical organization and data management based on metadata model, realize the interconnection of data, and improve the efficiency of businessoriented data management application services.
Key words :metadata separation; data management; data file; time series database
0 引言
嵌入式工业设备与信息化技术的融合,促使嵌入式工业计算机日益走向智能信息化,已经逐步渗透到产品研制的设计、制造、试验、运行、管理及维护的全过程,这些过程会产生各式各样的复杂数据[1]。特别是随着待处理数据越来越多,数据信息变得更加庞大,逐渐超出了传统数据管理软件的能力范围,从而促使人们必须依靠一种新的技术和管理体系来完成各项工作任务,由此,数据管理技术应运而生[2]。与传统互联网数据相比,嵌入式工业计算机系统设备的数据规模更加庞大复杂,流转速度更快,数据类型更为多元化。如果能够有效地利用数据管理技术处理和分析这些数据,将为嵌入式工业计算设备的设计验证、维护保障、系统测试、智能信息化管理提供有力支撑。
当前,嵌入式工业计算设备的硬件成本要求高、存储资源受限和应用场景特殊等制约因素,导致大量数据流失、数据获取困难、管理分散且服务目标单一等问题,形成了诸多数据孤岛现象[3]。研究如何实现分散存储数据之间的融合处理及高效管理技术,是当前数据管理及数据处理领域尚待解决的关键问题。
本文详细内容请下载:https://www.chinaaet.com/resource/share/2000005734
作者信息:
周俊鹏1,2,任德旺1,2,倪鑫1,2,李丽娜1,2,李亚晖1,2,李运喜1,2
(1.航空工业西安航空计算技术研究所,陕西西安710068;2.机载弹载计算机航空科技重点实验室,陕西西安710065)
此内容为AET网站原创,未经授权禁止转载。