期刊文献+
共找到179篇文章
< 1 2 9 >
每页显示 20 50 100
Security Analysis on a Remote Data Auditing Scheme for Distributed Storage Systems 被引量:1
1
作者 LIU Guangjun ZHANG Lining LI Xiangjun 《Wuhan University Journal of Natural Sciences》 CAS CSCD 2020年第6期527-530,共4页
Remote data auditing becomes critical to ensure the storage reliability in distributed cloud storage.Recently,Le et al proposed an efficient private data auditing scheme NC-Audit designed for regenerating codes,which ... Remote data auditing becomes critical to ensure the storage reliability in distributed cloud storage.Recently,Le et al proposed an efficient private data auditing scheme NC-Audit designed for regenerating codes,which claimed that NC-Audit can effectively realize privacy-preserving data auditing for distributed storage systems.However,our analysis shows that NC-Audit is not secure for that the adversarial cloud can forge some illegal blocks to cheat the auditor successfully with a high probability even without storing the user’s whole data,when the coding field is large enough. 展开更多
关键词 data auditing regeneration code network coding distributed storage cloud computing
原文传递
指控中心任务软件集中管控系统研究与关键技术
2
作者 杜兵 刘金灿 +2 位作者 李林峰 胡坤伦 孟令刚 《电子技术应用》 2024年第8期76-80,共5页
随着武器航天试验任务的增多,指控中心对任务软件快速部署、多任务并行的需求愈发迫切。设计了基于B/S架构的指控中心任务软件集中管控系统,实现了任务软件配置与监控的一体化管理;通过基于DBus与Kafka结合的数据传输机制,打通了任务软... 随着武器航天试验任务的增多,指控中心对任务软件快速部署、多任务并行的需求愈发迫切。设计了基于B/S架构的指控中心任务软件集中管控系统,实现了任务软件配置与监控的一体化管理;通过基于DBus与Kafka结合的数据传输机制,打通了任务软件与系统前后端数据高效交互链路;最后,重点分析了任务软件自动化部署技术、多任务并行技术、高速数据分级处理技术以及任务数据高效存储技术。 展开更多
关键词 自动化部署 前后端分离 多任务并行 高速率数据处理与存储
下载PDF
基于数据驱动的光伏—储能主动配电网电压控制方法研究
3
作者 肖寒 李振成 +3 位作者 王建伟 王高海 齐斐 梁凤敏 《能源与环保》 2024年第4期194-199,共6页
针对主动配电网中高比例分布式光伏发电的接入将会造成配电网电压越限的问题,传统的基于模型的电压控制方法在很大程度上依赖于精确的物理参数,这在实际工程中难以达到理想的效果。基于配置储能设备和无功补偿型功率变换器来解决主动配... 针对主动配电网中高比例分布式光伏发电的接入将会造成配电网电压越限的问题,传统的基于模型的电压控制方法在很大程度上依赖于精确的物理参数,这在实际工程中难以达到理想的效果。基于配置储能设备和无功补偿型功率变换器来解决主动配电网的电压越限问题,提出了一种基于数据驱动的光伏—储能主动配电网电压控制方法。为了实现储能设备和无功补偿型功率变换器的优化控制和管理,通过将具有系统功率损耗和电压约束的优化问题建模为马尔可夫决策过程(Markov Decision Process,MDP),同时利用基于柔性演员—评论家(Soft Actor Critic,SAC)的强化学习算法进行求解。最后,在IEEE 33节点配电网中对所提出的电压控制方法进行了验证,仿真结果表明,所提出的控制方法能够有效地降低主动配电网的电压偏差和电网的功率损耗,具有较好的控制性能。 展开更多
关键词 主动配电网 电压控制 数据驱动 储能
下载PDF
分布式存储中基于动态局部修复码的负载均衡研究
4
作者 邓文杰 唐聃 《软件导刊》 2024年第3期80-87,共8页
分布式存储系统中数据的访问存在不均衡性,大多数访问聚集在少部分数据上,便会引起系统的负载不均衡,导致部分高负载节点成为整个系统的性能瓶颈。针对此问题提出一种负载均衡的动态局部修复码(ALRC),该编码方案通过历史热度对冷热数据... 分布式存储系统中数据的访问存在不均衡性,大多数访问聚集在少部分数据上,便会引起系统的负载不均衡,导致部分高负载节点成为整个系统的性能瓶颈。针对此问题提出一种负载均衡的动态局部修复码(ALRC),该编码方案通过历史热度对冷热数据进行优先级确立,再对冷热数据进行动态编码,使其具备(r,t)-availability性质,让数据能够拥有额外的访问路径,借此提高热数据的并行访问性能和系统的负载均衡性,同时兼顾一定的存储效率。实验结果表明,ALRC在系统负载较不均衡时只需要相较于编码前少量的额外存储开销,便可拥有相较于原方案53%以上负载均衡度的提升,从而确保节点间的负载分布均匀,提高整个系统的性能和可靠性。 展开更多
关键词 分布式存储 冷热数据 负载均衡 局部修复码 并行访问
下载PDF
基于随机森林的电网GIS数据分布式存储方法
5
作者 杨秋勇 王建欣 +1 位作者 符飞虎 罗政 《电子设计工程》 2024年第17期27-30,35,共5页
内部电网地理信息系统(Geographic Information Systern,GIS)数据体量增加,对电网数据存储性能造成了极大的困难,为此,提出一种基于随机森林的电网GIS数据分布式存储方法。以跨域资源共享(Cross-Origin Resource Sharing,CORS)技术在电... 内部电网地理信息系统(Geographic Information Systern,GIS)数据体量增加,对电网数据存储性能造成了极大的困难,为此,提出一种基于随机森林的电网GIS数据分布式存储方法。以跨域资源共享(Cross-Origin Resource Sharing,CORS)技术在电网GIS空间信息服务平台中获取的电网GIS数据为基础,根据类区分度数值选择电网GIS数据特征,引入随机森林算法分类处理电网GIS数据,将其合理分发给不同的服务器,采用并行处理手段存储分类数据,从而实现了电网GIS数据的分布式存储。实验数据显示:应用所提方法后,电网GIS数据分类精度达到了96.8%,电网GIS数据分布式存储时间最小值为5.2 s,充分证实了所提方法数据存储性能更佳。 展开更多
关键词 数据分类 电网GIS数据 并行处理 分布式存储 随机森林算法 类区分度
下载PDF
面向算力网络的跨域数据管理方法
6
作者 鲁蔚征 戴奇志 张策 《大数据》 2024年第2期94-108,共15页
跨域算力网络希望整合多个算力中心的计算和数据资源,但现有的方案对跨域文件和数据管理关注不够。提出了一种轻量级的跨域算力网络数据管理方案:通过文件系统协议转换,接入远程算力中心的并行文件系统存储资源;算力中心内部的存储资源... 跨域算力网络希望整合多个算力中心的计算和数据资源,但现有的方案对跨域文件和数据管理关注不够。提出了一种轻量级的跨域算力网络数据管理方案:通过文件系统协议转换,接入远程算力中心的并行文件系统存储资源;算力中心内部的存储资源作为一种补充,应对高IOPS应用;通过容器绑定技术,将远程存储挂载并绑定到指定目录。基于该方案的原型系统已经在高校校级计算平台部署运行。实测数据和用户体验显示,该方案能够满足常见高性能计算应用需求。 展开更多
关键词 算力网络 并行文件系统 数据管理 异构存储资源
下载PDF
基于大数据技术的非关系型数据库分布式存储方法研究
7
作者 韩烨 《信息与电脑》 2024年第4期166-168,共3页
在当今信息时代,数据的复杂性不断增加,传统的关系型数据库在大规模数据存储和处理方面面临着挑战。非关系型数据库(Not Only SQL,NoSQL)作为一种新的存储和处理数据的方法,受到了广泛关注,并在分布式存储领域取得了显著的成就。文章重... 在当今信息时代,数据的复杂性不断增加,传统的关系型数据库在大规模数据存储和处理方面面临着挑战。非关系型数据库(Not Only SQL,NoSQL)作为一种新的存储和处理数据的方法,受到了广泛关注,并在分布式存储领域取得了显著的成就。文章重点探讨基于大数据技术的非关系型数据库分布式存储方法,并通过实验进行评估,发现其在可扩展性和安全性方面具有优势,可以为相关研究提供参考。 展开更多
关键词 大数据技术 非关系型数据库 分布式存储 数据存储方法 数据处理
下载PDF
大规模物联网数据的实时处理与存储
8
作者 石磊 李鹏 《通信电源技术》 2024年第4期146-148,共3页
详细探讨大规模物联网数据的实时处理与存储技术及其在智能城市交通管理等应用中的重要性。针对物联网数据的多样性、高并发、时变性以及异构性等特点,介绍流式处理、复杂事件处理(Complex Event Processing,CEP)、时序数据库以及分布... 详细探讨大规模物联网数据的实时处理与存储技术及其在智能城市交通管理等应用中的重要性。针对物联网数据的多样性、高并发、时变性以及异构性等特点,介绍流式处理、复杂事件处理(Complex Event Processing,CEP)、时序数据库以及分布式文件系统等主流技术,并结合智能交通管理案例,阐述这些技术在实时监测、交通调控、事件预警和长期趋势分析等方面的应用效果,为构建高效、实时的物联网数据处理与存储系统提供了理论支持和实践指导。 展开更多
关键词 物联网 实时处理 数据存储 流式处理 分布式文件系统
下载PDF
Parallel Algorithm Case Study Using Virtual Machine
9
作者 Zhang, Gongqing 《Journal of Systems Engineering and Electronics》 SCIE EI CSCD 1997年第3期51-59,共9页
This paper takes the Sobel operator as example to study parallel sequential algorithm onto a memory-sharing multiprocessor by using a virtual machine. Several different parallel algorithms using function decomposition... This paper takes the Sobel operator as example to study parallel sequential algorithm onto a memory-sharing multiprocessor by using a virtual machine. Several different parallel algorithms using function decomposition and/or data decomposition methods are compared and their performances are analyzed in terms of processor utilization, data traffic, shared memory access, and synchronization overhead. The analysis is validated through a simulation experiment on the virtual machine of 64 parallel processors. Conclusions are presented at the end of this paper. 展开更多
关键词 Computer simulation data processing data storage equipment Image processing parallel processing systems SYNCHRONIZATION Telecommunication traffic
下载PDF
A Secured Message Transmission Protocol for Vehicular Ad Hoc Networks
10
作者 A.F.M.Suaib Akhter A.F.M.Shahen Shah +3 位作者 Mohiuddin Ahmed Nour Moustafa UnalÇavu¸soglu Ahmet Zengin 《Computers, Materials & Continua》 SCIE EI 2021年第7期229-246,共18页
Vehicular Ad hoc Networks(VANETs)become a very crucial addition in the Intelligent Transportation System(ITS).It is challenging for a VANET system to provide security services and parallelly maintain high throughput b... Vehicular Ad hoc Networks(VANETs)become a very crucial addition in the Intelligent Transportation System(ITS).It is challenging for a VANET system to provide security services and parallelly maintain high throughput by utilizing limited resources.To overcome these challenges,we propose a blockchain-based Secured Cluster-based MAC(SCB-MAC)protocol.The nearby vehicles heading towards the same direction will form a cluster and each of the clusters has its blockchain to store and distribute the safety messages.The message which contains emergency information and requires Strict Delay Requirement(SDR)for transmission are called safety messages(SM).Cluster Members(CMs)sign SMs with their private keys while sending them to the blockchain to confirm authentication,integrity,and confidentiality of the message.A Certificate Authority(CA)is responsible for physical verification,key generation,and privacy preservation of the vehicles.We implemented a test scenario as proof of concept and tested the safety message transmission(SMT)protocol in a real-world platform.Computational and storage overhead analysis shows that the proposed protocol for SMT implements security,authentication,integrity,robustness,non-repudiation,etc.while maintaining the SDR.Messages that are less important compared to the SMs are called non-safety messages(NSM)and vehicles use RTS/CTS mechanism for NSM transmission.Numerical studies show that the proposed NSM transmission method maintains 6 times more throughput,2 times less delay and 125%less Packet Dropping Rate(PDR)than traditional MAC protocols.These results prove that the proposed protocol outperforms the traditional MAC protocols. 展开更多
关键词 Ad hoc networks data security digital signatures distributed storage intelligent vehicles vehicular ad hoc networks wireless communication
下载PDF
考虑量测数据质量的集成储能智能软开关数据驱动电压控制 被引量:6
11
作者 宋关羽 于川航 +3 位作者 冀浩然 赵金利 徐晶 李鹏 《电力系统自动化》 EI CSCD 北大核心 2023年第6期90-100,共11页
分布式电源的高比例接入使配电网电压控制问题日益显著。与配电网中传统电压调控设备相比,集成储能智能软开关(ESOP)等新型电力电子设备具有更加灵活、快速的电压调节能力。实际配电网参数难以获取,运行场景复杂多变,基于物理模型的控... 分布式电源的高比例接入使配电网电压控制问题日益显著。与配电网中传统电压调控设备相比,集成储能智能软开关(ESOP)等新型电力电子设备具有更加灵活、快速的电压调节能力。实际配电网参数难以获取,运行场景复杂多变,基于物理模型的控制方法往往难以适应系统运行状态变化。为此,提出一种考虑量测数据质量的ESOP数据驱动电压控制方法。首先,基于无模型自适应预测控制方法,建立ESOP的数据驱动控制模型。然后,考虑数据驱动过程中实际量测数据存在量测误差的问题,采用坏数据辨识和量测扰动抑制方法对量测数据进行处理,提出考虑量测数据质量的ESOP数据驱动电压控制方法,以降低量测误差对数据驱动控制过程的影响。最后,在含四端ESOP的实际配电网算例中进行验证分析。结果表明,所提ESOP数据驱动电压控制方法可以有效解决配电网参数难以准确获取的问题,显著降低量测误差带来的不良影响,全面提升配电网电压控制水平。 展开更多
关键词 配电网 智能软开关 储能 电压控制 数据驱动 量测数据
下载PDF
基于HBase与Netty的煤矿微震时序大数据存储优化
12
作者 丁琳琳 王智涵 +2 位作者 顾英豪 王凯璐 包鑫阳 《中国矿山工程》 2023年第5期29-35,共7页
在当前智能煤矿场景中,大量煤矿微震传感器所产生的时序数据呈爆炸式增长,进而对现有的存储系统及性能都有了更高的要求。目前已经存在基于分布式列族数据库HBase能够存储工业时序大数据的实例,但是由于没有考虑到特定业务场景中数据的... 在当前智能煤矿场景中,大量煤矿微震传感器所产生的时序数据呈爆炸式增长,进而对现有的存储系统及性能都有了更高的要求。目前已经存在基于分布式列族数据库HBase能够存储工业时序大数据的实例,但是由于没有考虑到特定业务场景中数据的特征关联问题,现有的策略仍然无法较好地满足煤矿微震波形时序数据的特定存储需求。针对上述问题,基于分布式存储系统HBase,利用煤矿微震波形时序数据的特征,提出了基于HBase与Netty的煤矿微震时序大数据存储性能优化(CM^(2) TS-HBase),分成四个部分,分别为数据采集层、数据预处理层、数据中转层以及数据存储层。其中,数据采集层分为离线部分与实时部分,离线部分即存储在数据中心硬盘中的历史微震时序数据文件,实时部分即部署在某煤矿的多个微震波形传感器通过网络实时地向数据预处理层进行数据缓冲;数据预处理层实现对波形时序数据的文件进行对齐、解析以及序列化操作。根据煤矿微震波形时序数据特征提出了适用于微震波形时序数据的HBase数据表结构、预分区策略以及主键优化策略,有效地解决了数据存储过程中出现的数据热点问题以及数据分散问题;数据中转层提出了基于Netty与Redis的数据转发中间件平台为整个存储体系提供异步处理机制,较好地解决了高并发存储问题;数据存储层是基于分布式数据库HBase作为存储体系的底层存储媒介。最终根据真实数据集的存储耗时证明了相较于原生存储方法(HBase API)与基于金融时序数据存储优化(FTBase),CM2T S-HBase在煤矿微震时序数据的存储性能有了明显提高。 展开更多
关键词 煤矿微震大数据 时序数据 分布式存储 高并发事务处理 预分区策略
下载PDF
基于无模型自适应控制的配电网电压控制方案 被引量:2
13
作者 潘俊迪 陈中 +2 位作者 倪纯奕 万玲玲 王毅 《电力工程技术》 北大核心 2023年第5期128-137,共10页
新型电力系统下分布式新能源、分布式发电、电动汽车等新型元素大规模发展,配电网电压控制将面临控制对象特性异构、模型复杂、场景多变等挑战。在此背景下,文中提出一种基于无模型自适应控制的配电网电压控制方案。该方案在配电网电压... 新型电力系统下分布式新能源、分布式发电、电动汽车等新型元素大规模发展,配电网电压控制将面临控制对象特性异构、模型复杂、场景多变等挑战。在此背景下,文中提出一种基于无模型自适应控制的配电网电压控制方案。该方案在配电网电压控制分区及主导节点选取的基础上,利用主导节点电压、分布式电源以及储能装置出力等数据建立实时动态线性化数据滚动池,基于特征模型理论和数据驱动,将复杂系统电压控制特性通过控制器特征参数进行时变修正,在不损失系统模型信息的基础上降低了控制模型复杂程度。最后,通过改进的IEEE 33节点配电网系统算例进行仿真分析和对比,结果证明了所提控制方案的有效性。相较于传统的基于模型的控制方法,所提控制方案能够更快速地响应扰动带来的电压波动问题,应用前景良好。 展开更多
关键词 无模型自适应控制 分布式电源 储能装置 配电网 电压控制 数据驱动
下载PDF
数据密集型超算现状、挑战以及未来发展趋势 被引量:1
14
作者 魏嘉 陈默 +8 位作者 王龙翔 任沛 雷雨佳 屈俞岐 蒋骐羽 董小社 伍卫国 张凯丽 张兴军 《数据与计算发展前沿》 CSCD 2023年第3期66-91,共26页
[目的]对数据密集型超算的发展历程、主流系统结构、典型应用和计算、存储子系统进行较全面的梳理,指出未来发展趋势,为后续数据密集型超算系统优化提供参考。[方法]本文首先梳理了数据密集型超算中的关键概念,分析阐述现有平台对数据... [目的]对数据密集型超算的发展历程、主流系统结构、典型应用和计算、存储子系统进行较全面的梳理,指出未来发展趋势,为后续数据密集型超算系统优化提供参考。[方法]本文首先梳理了数据密集型超算中的关键概念,分析阐述现有平台对数据密集型应用的支持程度。说明了科学界和工业界对数据密集型应用的实际需求情况。并对数据密集型超算的未来发展趋势和面临的潜在挑战进行展望,建立了超算系统评测模型。[结果]相关研究人员和从业者可从本文快速了解到超算技术的关键概念及发展状况,精准捕捉当下与未来数据密集型超算研究热点和亟待解决的关键问题。[结论]数据密集型超算存储系统面临的复杂数据类型优化、混合负载优化、多协议支持与互通等将会成为未来一段时间内研究和发展的热点问题。 展开更多
关键词 数据密集型超算 I/O密集型超算 高性能数据分析 并行处理系统 超算存储系统
下载PDF
基于分布式快速存储的变电站三维建模数据处理技术研究 被引量:3
15
作者 陈志辉 甘运良 +2 位作者 董跃周 雷伟刚 罗剑 《电子设计工程》 2023年第2期130-134,共5页
针对三维重建的技术在单一数据源的建模方面适用范围较窄且无法处理复杂应用场景等问题,文中根据三维模型信息与模型复用关系,并结合分布式快速存储技术来建立设备模型。将贴图数组赋值给场景光照贴图属性,从而生成了还原光照的设备模... 针对三维重建的技术在单一数据源的建模方面适用范围较窄且无法处理复杂应用场景等问题,文中根据三维模型信息与模型复用关系,并结合分布式快速存储技术来建立设备模型。将贴图数组赋值给场景光照贴图属性,从而生成了还原光照的设备模型。实际案例使用结果表明,文中所提出的数据处理技术能够有效降低模型所占内存大小,节约了加载模型的时间。与其他分布式算法相比,文中算法能够兼顾更新成本与响应速度,并提高数据加载效率,从而更有利于模型的快速渲染和存储。 展开更多
关键词 变电站 三维建模 分布式存储 数据处理
下载PDF
基于边云协同的飞行试验数据处理系统 被引量:1
16
作者 王霖萱 李宏 《南京信息工程大学学报(自然科学版)》 CAS 北大核心 2023年第6期692-702,共11页
飞行试验数据处理是飞行器试飞过程的关键环节.飞行试验数据具有类型多、数据量大、算法庞杂等特点,飞行试验数据处理系统需要具备试验数据快速分析和跨地域数据及时共享等新能力.本文在分析原有飞行试验数据处理系统基础上,提出了数据... 飞行试验数据处理是飞行器试飞过程的关键环节.飞行试验数据具有类型多、数据量大、算法庞杂等特点,飞行试验数据处理系统需要具备试验数据快速分析和跨地域数据及时共享等新能力.本文在分析原有飞行试验数据处理系统基础上,提出了数据处理中心与分集点、分集点与分集点共享、水平拆分飞行数据、分离处理等新方法,设计了一种基于边云协同的新型飞行试验数据处理系统,实现了试飞数据快速处理、跨地域数据共享和全过程科目执行效果推演与分析等功能. 展开更多
关键词 数据处理系统 边缘云 分布式文件系统 分布式存储系统
下载PDF
区块链下航空供应商质量数据管理平台设计
17
作者 曹鹏勇 段桂江 阳祥贵 《计算机工程与设计》 北大核心 2023年第7期2223-2231,共9页
为解决传统航空供应链管理存在的制造过程数据信息不明和监管不足等问题,设计区块链下供应商质量数据管理平台。结合生产车间检测业务阐述制造数据获取、归集、上链和应用的运行机制。提出针对航空供应商质量数据的全流程管理方案,涵盖... 为解决传统航空供应链管理存在的制造过程数据信息不明和监管不足等问题,设计区块链下供应商质量数据管理平台。结合生产车间检测业务阐述制造数据获取、归集、上链和应用的运行机制。提出针对航空供应商质量数据的全流程管理方案,涵盖数据的源头采集、质量数据融合与结构化、数据存储及响应和数据识别和溯源等关键技术。依托某航空产业园区对供方数据进行平台应用实践,提出数据管理可视化设计和基于数据应用的工序过程控制方案。通过应用实例验证了所提质量数据管理平台设计的可行性和实用性。 展开更多
关键词 区块链 供应商管理 数据采集 数据融合 分布式存储 应用平台 统计过程控制
下载PDF
云计算环境下舰船控制系统大数据有效存储方法 被引量:1
18
作者 王颖 《舰船科学技术》 北大核心 2023年第13期170-173,共4页
船舶控制系统大数据存储节点数量较多,节点分布不均,影响负载均衡性,导致数据存储过程中存在安全性与容错性差等问题,为此研究云计算环境下舰船控制系统大数据有效存储方法。构建云计算环境下船舶控制系统大数据存储架构,利用分布式大... 船舶控制系统大数据存储节点数量较多,节点分布不均,影响负载均衡性,导致数据存储过程中存在安全性与容错性差等问题,为此研究云计算环境下舰船控制系统大数据有效存储方法。构建云计算环境下船舶控制系统大数据存储架构,利用分布式大数据存储层中的管理引擎采集舰船控制系统数据;通过MapReduce分布式并行模型将所采集的数据划分至分布式数据库内;针对分布式数据库内的数据,采用安全容错存储算法将待存储的数据均匀地划分至相应的硬件层中计算机服务器节点内,完成舰船控制系统数据有效存储。实验结果显示该方法能够实现不同存储节点负载均衡,且具有较好的大数据存储性能。 展开更多
关键词 云计算环境 舰船控制系统 大数据存储 MAPREDUCE 分布式并行化 安全容错
下载PDF
基于分布式存储和并行计算的海量舆情数据分析方法研究 被引量:1
19
作者 邱国婷 《电子设计工程》 2023年第20期82-85,90,共5页
针对传统集中式数据分析方法难以适用于海量数据处理的问题,提出了一种基于分布式存储和并行计算的海量舆情数据分析方法。在构建完成的数据分析系统中,将采集的源数据存储在Hadoop分布式文件系统,并采用基于热点检测的缓存机制进行数... 针对传统集中式数据分析方法难以适用于海量数据处理的问题,提出了一种基于分布式存储和并行计算的海量舆情数据分析方法。在构建完成的数据分析系统中,将采集的源数据存储在Hadoop分布式文件系统,并采用基于热点检测的缓存机制进行数据读写。同时通过Spark进行数据查询,利用随机森林算法完成数据的高精度分析,且系统的数据分析结果会以各种形式显示并支持查询。在Hadoop 2.6.0与Spark 1.5.0平台上对所提方法进行的实验分析表明,30 000条记录的响应时间是7.8 s,分析准确率为96%,均优于其他对比方法,故具有一定的应用价值。 展开更多
关键词 分布式存储 并行计算 舆情数据 HADOOP分布式文件系统 SPARK 随机森林算法
下载PDF
基于BIRCH算法的配电网设备多源数据融合存储技术研究
20
作者 张军 陈霄 +2 位作者 何育 张旺 姜英涵 《电子设计工程》 2023年第16期180-186,共7页
针对智能配电网设备量剧增导致的数据上传速率慢、数据存储性能较差等问题,提出了基于海量信息处理的配电网设备数据存储模型研究。利用Hadoop分布式平台搭建配电网设备数据存储模型架构,以此获取配电网设备海量数据。且应用CMCH算法并... 针对智能配电网设备量剧增导致的数据上传速率慢、数据存储性能较差等问题,提出了基于海量信息处理的配电网设备数据存储模型研究。利用Hadoop分布式平台搭建配电网设备数据存储模型架构,以此获取配电网设备海量数据。且应用CMCH算法并行关联配电网设备的多源数据,并采用了BIRCH算法融合设备并行关联数据库,以此获取配电网设备多源数据融合结果。再通过一致性哈希算法存储配电网设备数据,实现配电网设备数据存储模型的运行。同时搭建了Hadoop分布式平台,准备实验数据集来进行设备数据存储仿真实验。实验结果显示,与传统模型相比,所构建模型的数据上传速率较高、数据压缩也比较大,充分说明了该模型设备数据的存储性能较好。 展开更多
关键词 海量信息处理 配电网 BIRCH算法 数据存储
下载PDF
上一页 1 2 9 下一页 到第
使用帮助 返回顶部