支持混合事务和分析处理的数据库管理系统综述

数据库管理系统根据应用场景分为事务型(OLTP)系统和分析型(OLAP)系统.随着实时数据分析需求增长,OLTP任务和OLAP任务混合的场景越来越普遍,业界开始重视支持混合事务和分析处理(HTAP)的数据库管理系统.这种HTAP数据库系统除了需要满足高性能的事务处理外,还需要满足实时分析对数据新鲜度的要求.因此,对数据库系统的设计与实现提出了新的挑战.近年来,在工业界和学术界涌现了一批架构多样、技术各异的原型和产品.综述HTAP数据库的背景和发展现状,并且从存储和计算的角度对现阶段的HTAP数据库进行分类.在此基础上,按照从下往上的顺序分别总结HTAP系统在存储和计算方面采用的关键技术.在此框架下介绍各类系统的设计思想、优劣势以及适用的场景.此外,结合HTAP数据库的评测基准和指标,分析各类HTAP数据库的设计与其呈现出的性能与数据新鲜度的关联.最后,结合云计算、人工智能和新硬件技术为HTAP数据库的未来研究和发展提供思路.

基于云边协同的智能制造系统中的实时数据处理与分析研究

旨在探讨基于云边协同的智能制造系统中的实时数据处理与分析的方法与应用。随着制造业的数字化转型,实时数据处理与分析对提高生产效率和质量至关重要。作为一种新兴的计算范式,云边协同允许将数据处理任务分布到边缘设备,以满足实时性要求。提出了一种基于云边协同的框架,通过实验验证了其有效性。结果表明,所提出的框架能显著提高数据处理效率,满足实时性需求,为智能制造系统的数字化转型提供了有力支持。

在线评论数据挖掘视角下游客情感分析模式构建——以肇庆市七星岩景区为调研对象

互联网时代的到来,推动全球的经济发展发生巨大改变。如今互联网已经是人们的生活中不可分割的一部分。旅游行业的业态也随网络时代而转变。随着各旅游平台的兴起,在线评论已经是很普遍的现象,并成为人们旅游消费的重要参考指标。该文以肇庆市七星岩景区为调研对象,基于在线评论的视角对数据采集进行剔除过滤、高频词统计及可视化呈现等一系列工作,通过情感分析法对数据进行分析整理,构建游客情感分析模式。经过系列的实证试验分析可以诊断,对于旅游目的地因素,游客的情感更为敏感以及在意;管理和景观是景区提升自身竞争力的重要内容;消费不仅受游客关注度影响,同时也对游客情感有着显著的影响力。提出关于资源管理、经济发展模式和服务、饮食开发的相关建议。

基于在线数据分析的飞机内部异常通信行为识别系统设计研究

面向信息化装备建设,提出了一种飞机内部异常通信行为分析与检测技术。基于网络的异常通信行为分析与检测系统框架,研究了网络环境中飞机报文流量特征建模、网络通信行为特征提取、特征知识库管理、异常检测策略及算法等,最终实现异常通信行为分析与检测试验系统。对基于网络的异常通信行为特征实现识别和检测,满足飞机内部网络/总线环境下对异常状态及其行为检测的准确性和实时性需求具有一定意义。

COD在线分析仪预处理系统的处理方法改造

针对某石化公司总入污水分析小屋COD-2000预处理系统取样管路易堵塞,常减压装置及催化裂化装置工况异常时除油效果不佳导致测量数据不准确,聚光COD-2000型仪器出厂配套预处理损坏,仪器无法通过触发信号自动采样或手动控制采样及调试等问题,本着充分利旧的原则,通过增设电动阀、电磁阀、自清洗过滤器、蠕动泵、样品杯等仪器仪表,以及加装PLC控制模块和电气控制箱,使预处理系统具备自动采样、自动仪表气反吹、自来水清洗等功能,实现采样周期分析过程自动化。在一定程度上提升预处理系统采样、反冲洗自动化水平,降低操作人员工作负荷,帮助企业提质、降本、增效。

工业循环水在线监测数据处理与挖掘技术研究

随着工业自动化和信息技术的不断发展,工业循环水的在线监测日益成为提高系统效率和安全性的关键环节。探讨了工业循环水在线监测数据的处理与挖掘技术,包括数据采集、传输、存储、预处理、高级分析及其在效率优化和预测性维护中的应用。通过分析这些技术的应用方法和策略,提出有效的解决方案,以提升工业循环水的运行效率和维护能力,进而实现系统性能最优化和风险最小化。

基于关联分析FP-Tree算法的企业风险信息数据在线挖掘方法

现阶段的数据挖掘方法缺少对数据关联分析的过程,挖掘效果较差,故文章提出基于关联分析频繁模式树(FrequentPattern Tree, FP-Tree)算法的企业风险信息数据在线挖掘方法。选取与企业风险相关的信息指标,收集有关数据并进行预处理操作后,设计一种考虑关联分析的FP-Tree算法,生成FP-Tree节点的条件模式树挖掘频繁项集,计算满足最小置信度的频繁项集,实现企业风险信息数据在线挖掘。实验结果表明,所用方法挖掘量和挖掘效率较高。

基于数据挖掘分析的牛病辅助诊疗系统设计

通过收集大量的多源牛电子病历数据,利用数据分析和挖掘技术设计了畜牧业中牛病辅助诊疗系统,实现了牛疾病智能诊断的目的。首先,采用文本预处理技术去除牛电子病历数据上的重复、停用词、分词等数据,分为训练集和测试集;其次,使用支持向量机(SVM)构造分类器以对选定的症状词进行分类;最后,采用Apriori算法将具体的疾病名称与疾病发生概率进行关联,给出相应的治疗方案。该系统能及时治疗疾病,有效减少牧民损失,实现畜牧业科学智能化的发展。

隧道监测数据分析处理系统的研发与应用

在当代隧道建造的先进技术中,对隧道施工进行监控和量测扮演了一个关键角色。处理及分析监控数据,并据此评估围岩以及隧道支护结构的稳定安全性,对改善设计方案和确保施工安全性发挥着至关重要的影响。本研究将焦点放在莞惠城际轨道交通GZH-5标暗挖隧道项目上,专注于隧道施工监控量测数据自动化分析处理的研究。经过实际工程应用验证,该软件工具展现出了其便捷高效的数据处理和分析能力,并能全面评判围岩稳定性,显示出极高的实用性价值。

基于大数据的污染源在线自动监测数据分析与决策支持系统研究

随着工业化和城市化进程的推进,环境污染问题日益凸显,因此对环境质量的实时监测与精准管控成为环保工作的重中之重。大数据是时代发展的产物,当下该技术已经实现了在人们生产生活诸多领域中的应用,并发挥了极为重要的作用,推动了这些领域的发展和进步。在此背景下,应积极将该技术应用到环境保护工作中,构建基于大数据的污染源在线自动监测数据分析与决策支持系统,使环境保护工作的作用充分发挥出来,让人们所处环境更加洁净健康,提升人们的幸福感。

基于数据库系统工程大数据分析的状态监测与故障处理方法

文章探讨了基于数据库系统工程的大数据分析在医疗系统中的应用,以及状态监测与故障处理方法,并通过分析大数据,提出了一种有效的方法来改善医疗系统的性能和可靠性。该方法将大数据分析与数据库系统工程相结合,为医疗系统的监测和维护提供了新的视角。该研究强调了大数据分析在医疗领域的重要性,并提供了具体的应用案例。

无人机载荷数据处理与分析系统的架构设计与优化

在21世纪的技术革新浪潮中,无人机技术以其独特的魅力和广泛的应用前景,正日益成为创新的前沿领域。在众多无人机应用场景中,载荷数据处理与分析系统扮演着至关重要的角色。如何设计并优化无人机载荷数据处理与分析系统,提高数据处理效率和分析精准度,成为当前无人机领域研究的热点问题。文中阐述了无人机载荷数据处理与分析系统的设计目标,提出了无人机载荷数据处理与分析系统的架构设计与优化策略,最后结合实际案例进行了详细分析,以期为该行业提供参考价值。

多功能雷达总体数据分析系统设计与实现

多功能一体化是雷达发展的必然趋势,随着功能的增加,多模式间切换频繁调度复杂,系统调试工作量呈指数增长,数据分析与管理的难度增大。为提高多功能雷达数据分析效率,辅助问题定位分析与系统状态检查,加快雷达研制进程,分析了总体数据分析在雷达研制和使用阶段的重要作用,研究了雷达总体数据分析软件的需求与系统设计,并通过Matlab进行实现。该软件可以分析雷达多环节数据,并以表格和图像的形式呈现分析结果。经过实验数据验证,该软件能够有效地提高分析效率,进行雷达状态判断和性能评估,快速发现与定位问题。

急性肾损伤临床大数据挖掘与分析系统的建立

目的:为了及时发现急性肾损伤及其并发症之间的关联,设计并建立急性肾损伤临床数据挖掘与分析系统及预警系统,预测急性肾损伤患者病情的发展。方法:收集急性肾损伤患者的临床大数据,从年龄、性别、地区、民族、病因、AKI分期、检验指标等多维度出发,构建多维分析模型;通过对急性肾损伤临床数据的挖掘与分析,建立急性肾损伤与并发症之间的关联预测模型。结果:根据某三甲医院急诊/重症监护室的应用评估,80%以上的AKI患者可以根据此预警系统进行识别。结论:急性肾损伤临床数据挖掘与分析系统及预警系统能更好地指导医生预测AKI患者病情,帮助患者采取有关预防措施并获得精准治疗。

基于三维空间的在线智能巡视系统数据处理

传统的三维空间在线智能巡视系统的数据处理方法不能有效分析数据属性与空间关系,数据处理效果不理想,为此提出基于三维空间在线智能巡视系统数据处理方法。采集不同智能巡视系统中的随机数据作为样本,对其建模,构建空间分割代价函数,利用空间分割的方式将数据二维空间转换成三维空间,在此基础上,对三维坐标转换,建立数据索引,以此完成智能巡视系统数据处理。实例分析结果表明,文中方法有效降低系统数据偏差率,处理效果较好。

基于数据挖掘和网络药理学方法探讨中医药治疗系统性红斑狼疮的用药规律和作用机制

目的:基于数据挖掘分析中医药治疗系统性红斑狼疮(systemic lupus erythematosus,SLE)的用药规律并筛选核心药对,通过网络药理学方法和分子对接技术探讨核心药对治疗SLE的作用机制。方法:收集2012年6月—2022年12月在安徽中医药大学第一附属医院风湿病科住院治疗的SLE患者的资料进行分析,共获得472名患者的完整处方,运用Excel 2016对用药规律进行统计分析,通过IBM SPSS Modeler 18.0软件对中药进行关联规则分析;通过TCMSP数据库检索药物活性成分和靶点,以“systemic lupus erythematosus”为关键词,检索DrugBank、GeneCards、TTD、OMIM数据库获取疾病相关靶点,构建药物-疾病交集靶点韦恩图;采用Cytoscape 3.7.1软件构建蛋白相互作用网络图和“药物-活性成分-靶点”网络图,通过Hubba插件获得药物治疗SLE的核心靶点;通过Metascape数据库进行基因本体(Gene Ontology,GO)功能富集分析及京都基因及基因组百科全书(Kyoto Encyclopedia of Genes and Genome,KEGG)通路富集分析;利用AutoDock 4.2.6软件对核心靶点与主要成分进行分子对接,通过PyMOL 2.5.2进行可视化分析。结果:SLE患者益气健脾化湿(茯苓、山药、黄芪等)及滋阴清热(知母、青蒿、地骨皮等)中药使用频次较高,甘味药、寒性药以及归肝、脾、肾经的中药使用频次较高。知母-黄柏组合具有较高的支持度(41.31%)和置信度(71.79%),可能在SLE的治疗中发挥重要作用。网络药理学结果表明,知母-黄柏共有34个活性成分,97个潜在作用靶点,该药对治疗SLE的5个核心靶点包括肿瘤坏死因子(tumornecrosis factor,TNF)、蛋白激酶B(protein kinase B,Akt1)、白细胞介素-6(interleukin 6,IL-6)、白细胞介素-1β(interleukin1β,IL-1β)、肿瘤蛋白p53(tumor protein p53,TP53)。GO功能和KEGG通路富集分析结果显示,知母-黄柏组合治疗SLE与平滑肌适应、发热、丝氨酸蛋白酶抑制剂复合物等生物过程以及IL-17、TNF、MAPK等信号通路密切相关。分子对接显示核心靶点和活性成分具有良好的对接活性。结论:中医药治疗SLE以益气健脾化湿、滋阴清热药物为主,知母-黄柏是治疗SLE的关键药对,可能通过多成分、多靶点、多通路发挥对SLE的治疗作用。

基于SCADA系统和信号处理的风力发电机主轴承故障分析与诊断

基于SCADA在线监测系统,通过该系统获取到主轴承实时振动数据,用小波包、集合经验模态分解模型进行信号处理和提取故障特征,分析其时域图的冲击信号、频谱图故障特征频率、包络谱故障频率幅值和谐波信号倍数情况,可以判断出主轴承故障位置以及受损情况,实现主轴承故障预警,为风力发电场现场运维人员高效维修提供帮助,降低运维成本。

基于工业数据挖掘的ESD软失效分析

针对电子产品出货后出现ESD软失效而导致的退货现象,文章通过机器学习算法分析产品ICT电性能测试参数、生产线ESD防护监控数据和产品ESD软失效的相关性。集成算法模型经过优化,分类准确率达到0.88,可以用于量产电子产品的ESD软失效的识别和出货风险管控。同时,利用ESD防护监控点风险指数数据集可以提高产品ESD软失效的识别准确率(8.6%)。安装部署基于物联网技术的静电放电防护监控系统,对管控电子产品生产过程中的ESD软失效风险以及控制出货风险是很有帮助的,可以提高电子制造业防静电管控的智慧化水平。

基于自然语言处理的铁路客运营销分析智能对话系统研究

为提高铁路客运营销数据分析能力,研究开发了铁路客运营销分析智能对话系统,为铁路客运营销业务人员提供一种基于人机对话的数据分析工具。该系统包括语音识别、自然语言文本处理、智能数据挖掘、智能应答4个主要功能模块;利用语音唤醒和语音识别技术采集语音数据,通过神经网络模型将语音数据转换成自然语言文本;建立自然语言文本预处理模型,完成基于规则的词法句法分析方法,使用长短期记忆神经网络实现语义理解,确定用户意图;基于Bert模型的Text-to-SQL技术,将自然语言文本数据转换成数据查询SQL语句,构建智能Agent完成数据挖掘分析,生成数据分析结果;最后,运用语音合成技术和数据可视化技术,将数据分析结果转换为用户应答信息。

考虑STP与LKJ数据融合的机地综合分析系统

无线调车机车信号和监控系统(STP)和列车运行监控装置(LKJ)系统独立地分析和操作过程,导致在STP系统中对机车制动、卸载等现象的分析耗费大量的时间和精力。为此,在分析STP系统与LKJ各自应用场景与功能差异基础上,设计机地综合分析系统,将STP系统与LKJ数据的调车机动作和地面信号设备变化综合处理,实现信息的诊断分析,设计系统的报警、统计与分析功能。机地综合分析系统能够有效降低分析人员跨专业分析的难度,减轻人员综合劳动强度,提升维护水平。