期刊文献+
共找到1,861篇文章
< 1 2 94 >
每页显示 20 50 100
An attention-based teacher-student model for multivariate short-term landslide displacement prediction incorporating weather forecast data
1
作者 CHEN Jun HU Wang +2 位作者 ZHANG Yu QIU Hongzhi WANG Renchao 《Journal of Mountain Science》 SCIE CSCD 2024年第8期2739-2753,共15页
Predicting the displacement of landslide is of utmost practical importance as the landslide can pose serious threats to both human life and property.However,traditional methods have the limitation of random selection ... Predicting the displacement of landslide is of utmost practical importance as the landslide can pose serious threats to both human life and property.However,traditional methods have the limitation of random selection in sliding window selection and seldom incorporate weather forecast data for displacement prediction,while a single structural model cannot handle input sequences of different lengths at the same time.In order to solve these limitations,in this study,a new approach is proposed that utilizes weather forecast data and incorporates the maximum information coefficient(MIC),long short-term memory network(LSTM),and attention mechanism to establish a teacher-student coupling model with parallel structure for short-term landslide displacement prediction.Through MIC,a suitable input sequence length is selected for the LSTM model.To investigate the influence of rainfall on landslides during different seasons,a parallel teacher-student coupling model is developed that is able to learn sequential information from various time series of different lengths.The teacher model learns sequence information from rainfall intensity time series while incorporating reliable short-term weather forecast data from platforms such as China Meteorological Administration(CMA)and Reliable Prognosis(https://rp5.ru)to improve the model’s expression capability,and the student model learns sequence information from other time series.An attention module is then designed to integrate different sequence information to derive a context vector,representing seasonal temporal attention mode.Finally,the predicted displacement is obtained through a linear layer.The proposed method demonstrates superior prediction accuracies,surpassing those of the support vector machine(SVM),LSTM,recurrent neural network(RNN),temporal convolutional network(TCN),and LSTM-Attention models.It achieves a mean absolute error(MAE)of 0.072 mm,root mean square error(RMSE)of 0.096 mm,and pearson correlation coefficients(PCCS)of 0.85.Additionally,it exhibits enhanced prediction stability and interpretability,rendering it an indispensable tool for landslide disaster prevention and mitigation. 展开更多
关键词 Landslide prediction MIC LSTM attention mechanism Teacher Student model Prediction stability and interpretability
下载PDF
HybridGAD: Identification of AI-Generated Radiology Abstracts Based on a Novel Hybrid Model with Attention Mechanism
2
作者 TugbaÇelikten Aytug Onan 《Computers, Materials & Continua》 SCIE EI 2024年第8期3351-3377,共27页
Class Title:Radiological imaging method a comprehensive overview purpose.This GPT paper provides an overview of the different forms of radiological imaging and the potential diagnosis capabilities they offer as well a... Class Title:Radiological imaging method a comprehensive overview purpose.This GPT paper provides an overview of the different forms of radiological imaging and the potential diagnosis capabilities they offer as well as recent advances in the field.Materials and Methods:This paper provides an overview of conventional radiography digital radiography panoramic radiography computed tomography and cone-beam computed tomography.Additionally recent advances in radiological imaging are discussed such as imaging diagnosis and modern computer-aided diagnosis systems.Results:This paper details the differences between the imaging techniques the benefits of each and the current advances in the field to aid in the diagnosis of medical conditions.Conclusion:Radiological imaging is an extremely important tool in modern medicine to assist in medical diagnosis.This work provides an overview of the types of imaging techniques used the recent advances made and their potential applications. 展开更多
关键词 Generative artificial intelligence AI-generated text detection attention mechanism hybrid model for text classification
下载PDF
基于CEEMDAN分解和CNN-GRU-Attention模型的碳价格预测研究
3
作者 唐政一 王浩 党亚峥 《建模与仿真》 2024年第5期5444-5458,共15页
考虑到碳价格数据的波动较大,为更好地帮助企业获取碳排放权,建立起准确的碳交易价格预测模型,本文结合CEEMDAN分解和CNN-GRU-Attention模型来搭建碳价格数据预测模型。在本文提出的方案中,首先对碳价格原始序列进行CEEMDAN分解,通过熵... 考虑到碳价格数据的波动较大,为更好地帮助企业获取碳排放权,建立起准确的碳交易价格预测模型,本文结合CEEMDAN分解和CNN-GRU-Attention模型来搭建碳价格数据预测模型。在本文提出的方案中,首先对碳价格原始序列进行CEEMDAN分解,通过熵排列重组成新的子序列以提高预测精度、减小计算规模,之后构建CNN-GRU-Attention模型对新的子序列进行预测。通过多模型预测对比可以发现,本文提出的结合CEEMDAN分解和CNN-GRU-Attention模型来搭建的碳价格数据预测模型具有较好的拟合能力,并具备较好的泛化能力。 展开更多
关键词 碳价 CEEMDAN分解 cnn-gru-attention模型
原文传递
Stock Price Prediction Based on the Bi-GRU-Attention Model
4
作者 Yaojun Zhang Gilbert M. Tumibay 《Journal of Computer and Communications》 2024年第4期72-85,共14页
The stock market, as one of the hotspots in the financial field, forms a data system with a huge volume of data and complex relationships between various factors, making stock price prediction an area of keen interest... The stock market, as one of the hotspots in the financial field, forms a data system with a huge volume of data and complex relationships between various factors, making stock price prediction an area of keen interest for further in-depth mining and research. Mathematical statistics methods struggle to deal with nonlinear relationships in practical applications, making it difficult to explore deep information about stocks. Meanwhile, machine learning methods, particularly neural network models and composite models, which have achieved outstanding results in other fields, are being applied to the stock market with significant results. However, researchers have found that these methods do not grasp the essential information of the data as well as expected. In response to these issues, researchers are exploring better neural network models and combining them with other methods to analyze stock data. Thus, this paper proposes the ABiGRU composite model, which combines the attention mechanism and bidirectional gated recurrent unit (GRU) that can effectively extract data features for stock price prediction research. Models such as LSTM, GRU, and Bi-LSTM are selected for comparative experiments. To ensure the credibility and representativeness of the research data, daily stock price indices of BYD are chosen for closing price prediction studies across different models. The results show that the ABiGRU model has a lower prediction error and better fitting effect on three index-based stock prices, enhancing the learning efficiency of the neural network model and demonstrating good prediction stability. This suggests that the ABiGRU model is highly adaptable for stock price prediction. 展开更多
关键词 Machine Learning attention Mechanism LSTM Neural Network ABiGRU model Stock Price Prediction
下载PDF
基于CNN-BiGRU-Attention的短期电力负荷预测 被引量:1
5
作者 任爽 杨凯 +3 位作者 商继财 祁继明 魏翔宇 蔡永根 《电气工程学报》 CSCD 北大核心 2024年第1期344-350,共7页
针对目前电力负荷数据随机性强,影响因素复杂,传统单一预测模型精度低的问题,结合卷积神经网络(Convolutional neural network,CNN)、双向门控循环单元(Bi-directional gated recurrent unit,BiGRU)以及注意力机制(Attention)在短期电... 针对目前电力负荷数据随机性强,影响因素复杂,传统单一预测模型精度低的问题,结合卷积神经网络(Convolutional neural network,CNN)、双向门控循环单元(Bi-directional gated recurrent unit,BiGRU)以及注意力机制(Attention)在短期电力负荷预测上的不同优点,提出一种基于CNN-BiGRU-Attention的混合预测模型。该方法首先通过CNN对历史负荷和气象数据进行初步特征提取,然后利用BiGRU进一步挖掘特征数据间时序关联,再引入注意力机制,对BiGRU输出状态给与不同权重,强化关键特征,最后完成负荷预测。试验结果表明,该模型的平均绝对百分比误差(Mean absolute percentage error,MAPE)、均方根误差(Root mean square error,RMSE)、判定系数(R-square,R~2)分别为0.167%、0.057%、0.993,三项指标明显优于其他模型,具有更高的预测精度和稳定性,验证了模型在短期负荷预测中的优势。 展开更多
关键词 卷积神经网络 双向门控循环单元 注意力机制 短期电力负荷预测 混合预测模型
下载PDF
基于CNN-BiLSTM-Attention的三峡库区滑坡地表位移预测研究
6
作者 陈欢 冯晓亮 +4 位作者 刘一民 赵晗 刘洋 郭浪 张军 《沉积与特提斯地质》 CAS CSCD 北大核心 2024年第3期572-581,共10页
地表位移预测在滑坡监测预警中具有重要意义,建立稳定可靠的滑坡位移预测模型是关键。本文基于卷积神经网络和注意力机制的滑坡位移预测方法,并以三峡库区黄泥巴蹬坎滑坡为例进行了验证。本文综合分析了该滑坡长达8年的降雨量、库水位... 地表位移预测在滑坡监测预警中具有重要意义,建立稳定可靠的滑坡位移预测模型是关键。本文基于卷积神经网络和注意力机制的滑坡位移预测方法,并以三峡库区黄泥巴蹬坎滑坡为例进行了验证。本文综合分析了该滑坡长达8年的降雨量、库水位和地表位移等监测数据,建立了结合卷积神经网络(convolutional neural network,CNN)、双向长短期记忆(bidirectional long short-term memory,BiLSTM)网络和注意力机制(attention)的CNN-BiLSTM-Attention深度学习组合预测模型,采用了适应性学习率和正则化技术进行模型训练,提高了模型的泛化能力同时避免过拟合,并与传统LSTM模型进行对比验证。结果表明:相较于传统的机器学习和神经网络方法,该模型在滑坡位移预测精度上取得了显著提升,预测模型拟合优度(R^(2))达0.989,平均绝对百分比误差(MAPE)仅为0.059。 展开更多
关键词 滑坡监测 地表位移 注意力机制 预测模型 三峡库区
下载PDF
基于Attention-LSTM时序模型的机械钻速预测方法
7
作者 王彬 徐英卓 +1 位作者 刘烨 李燕 《西安石油大学学报(自然科学版)》 CAS 北大核心 2024年第5期85-95,共11页
针对石油天然气开采成本优化的需求,聚焦钻井作业中提速的关键技术,即机械钻速的预测。传统预测方法通常只考虑瞬时工程参数对机械钻速的影响,而未充分考虑钻井作业的时序性以及机械钻速在时间序列上的相关性。提出一种结合时序特征的... 针对石油天然气开采成本优化的需求,聚焦钻井作业中提速的关键技术,即机械钻速的预测。传统预测方法通常只考虑瞬时工程参数对机械钻速的影响,而未充分考虑钻井作业的时序性以及机械钻速在时间序列上的相关性。提出一种结合时序特征的机械钻速预测模型,该模型基于Attention-LSTM架构。通过Attention机制,模型有效捕捉了工程参数与机械钻速之间的相关性,并利用LSTM网络提取参数的时序特征,增强了模型对时间依赖性的捕捉能力。实验结果证实,所提模型相较于传统深度神经网络在预测精度上有显著提升。添加的Attention机制进一步提升了模型的解释性、训练效率及预测准确性。采用实际油田钻井数据对提出的方法进行了验证,并与现有几种机械钻速预测模型进行了对比分析,证明了本文方法在准确性、可靠性及解释性方面的优势。 展开更多
关键词 机械钻速 预测模型 时序性 attention-LSTM
下载PDF
基于Attention-UNet网络的速度模型构建方法研究
8
作者 孙德辉 王云专 王莉利 《物探化探计算技术》 CAS 2024年第1期1-10,共10页
随着油气资源的不断勘探开发,相对易开采的油气矿逐渐建成,地震勘探的研究重点也向地下更深、构造更复杂的区域转移。目前,传统的地震速度建模方法在稳定性、准确性和计算效率方面都面临挑战。因此,笔者利用将地震数据映射到速度模型的... 随着油气资源的不断勘探开发,相对易开采的油气矿逐渐建成,地震勘探的研究重点也向地下更深、构造更复杂的区域转移。目前,传统的地震速度建模方法在稳定性、准确性和计算效率方面都面临挑战。因此,笔者利用将地震数据映射到速度模型的思路,提出了一种基于Attention-UNet网络的深度学习速度建模方法。采用的这种方法利用有限差分正演得到反射波形数据,将反射波形数据和对应的速度模型(标签)对作为Attention-UNet网络的输入,建立地震数据和速度模型之间的映射关系。网络训练后对新输入的地震数据进行速度模型的估计。数值实验结果表明,与传统的FWI相比,笔者提出的方法表现出良好的性能;基于Attention-UNet网络模型训练完成后,不需要经过大量的计算,就可以快速执行与训练集中速度结构相似的地下结构的速度建模,这比传统方法计算效率更高。该方法在建立大量速度模型时具有很好的推广价值。 展开更多
关键词 速度建模 注意力机制 UNet 全波形反演
下载PDF
引入卷积块注意力模块的Attention U-Net木材表面裂纹检测方法
9
作者 项晓扬 王明涛 多化琼 《林业工程学报》 CSCD 北大核心 2024年第4期140-146,共7页
木材缺陷会影响木材的使用价值和使用期限,其中木材表面裂纹是严重影响木材外观质量和机械强度的一种木材缺陷。对木材表面裂纹的检测可以尽快发现此类缺陷木材,或为后续处理提供依据。针对现有的人工检测和自动化检测木材表面裂纹效率... 木材缺陷会影响木材的使用价值和使用期限,其中木材表面裂纹是严重影响木材外观质量和机械强度的一种木材缺陷。对木材表面裂纹的检测可以尽快发现此类缺陷木材,或为后续处理提供依据。针对现有的人工检测和自动化检测木材表面裂纹效率低、成本高、漏检率高等问题,采用引入卷积块注意力模块(convolutional block attention module,CBAM)的Attention U-Net深度学习模型对木材表面裂纹图像进行语义分割,从而达到木材表面裂纹检测的目的。引入的CBAM模块包含通道注意力机制和空间注意力机制,分别用于捕捉通道间的依赖关系和像素级的空间关系,该模块被添加到Attention U-Net网络的编码阶段,以增加感兴趣区域的权重并抑制冗余信息。最后,通过消融试验验证了Attention U-Net中加入CBAM对分割性能的提升。采用像素准确率(PA)、类别像素准确率(CPA)、召回率(Recall)、Dice系数、交并比(IoU)和平均交并比(MIoU)等语义分割评价指标评价各模型的优劣,并确定最佳模型及其参数。在自制木材表面数据集的裂纹分割中,使用AdamW优化器引入CBAM的Attention U-Net的PA、木材裂纹Recall、木材裂纹Dice系数、木材裂纹IoU、MIoU分别比使用SGD优化器的Attention U-Net原始模型提高了0.11%,4.14%,2.96%,3.58%和1.84%。结果表明,使用AdamW优化器引入CBAM的Attention U-Net能够较好地分割背景和木材表面裂纹,区分节点、表面纹理和木材裂纹,并将节点和表面纹理分割为背景。 展开更多
关键词 图像处理 语义分割 木材表面裂纹检测 深度学习 U-Net模型 注意力机制
下载PDF
基于多传感器信息融合和CNN-BIGRU-Attention模型的液压防水阀故障诊断方法
10
作者 肖遥 向家伟 +1 位作者 汤何胜 任燕 《机电工程》 CAS 北大核心 2024年第9期1517-1528,共12页
在建筑工程领域,尤其是在工程搅拌设备中,涉及到复杂液压工作介质,液压防水阀往往会出现不同程度的故障。此外,恶劣的工作环境和复杂的噪声背景使得对液压防水阀的故障进行诊断变得困难。为了解决这一难题,提出了一种基于多传感器信息... 在建筑工程领域,尤其是在工程搅拌设备中,涉及到复杂液压工作介质,液压防水阀往往会出现不同程度的故障。此外,恶劣的工作环境和复杂的噪声背景使得对液压防水阀的故障进行诊断变得困难。为了解决这一难题,提出了一种基于多传感器信息融合和卷积神经网络-双向门控循环单元-自注意力机制(CNN-BIGRU-Attention)模型的防水阀故障诊断方法。首先,考虑到单一传感器振动信号难以充分表达故障特征,该方法使用了3个传感器采集含噪声的振动信号,并进行了必要的预处理;其次,提取了信号的16个时域特征、5个频域特征以及3个时频域特征,并利用熵权法进行了特征融合,达到了增强特征的目的;然后,将融合的多维特征集输入到CNN-BIGRU-Attention模型中进行了特征识别;最后,利用实际的液压防水阀故障诊断实验,验证了该方法的有效性。研究结果表明:采用多传感器提取的特征更为全面,信息融合有助于捕捉更完整的隐藏数据特征,从而显著提高诊断的准确率;相较于其他特征识别方法,采用CNN-BIGRU-Attention模型的液压防水阀故障诊断准确率可分别提高6.7%、4.6%和14.2%,达到了96.86%,证明了该方法的有效性。该方法将先进的机器学习技术与实际工程应用相结合,为建筑工程问题提供了一种新颖、有效的解决方案。 展开更多
关键词 液压传动系统 液压防水阀 多传感器 滑动时间窗 TEAGER能量算子 熵权法 卷积神经网络-双向门控循环单元-自注意力机制模型
下载PDF
基于CB-Attention的JavaScript恶意混淆代码检测方法
11
作者 徐鑫 张志宁 +2 位作者 吕云山 李立 郑玉杰 《计算机工程与设计》 北大核心 2024年第8期2298-2305,共8页
当今JavaScript代码混淆方法日益多样,现有检测方法在对混淆代检测时会出现漏报和误报的情况,为解决该问题,提出一种基于CB-Attention的JavaScript恶意代码检测方法。由SDPCNN模型和BiLSTM+Attention模型构成,SDPCNN对短距离间的语义特... 当今JavaScript代码混淆方法日益多样,现有检测方法在对混淆代检测时会出现漏报和误报的情况,为解决该问题,提出一种基于CB-Attention的JavaScript恶意代码检测方法。由SDPCNN模型和BiLSTM+Attention模型构成,SDPCNN对短距离间的语义特征信息进行提取,BiLSTM+Attention获取JavaScript代码中长距离间的语义信息特征。为验证所提方法的有效性,将该方法与其它方法进行对比,对比结果表明,该方法具有较好的检测效果,F1-Score可达98.78%。 展开更多
关键词 JavaScript恶意代码 混淆代码 检测模型 增强深度金字塔卷积神经网络 注意力网络 双向长短时记忆网络 长距离特征信息 抽象语法树
下载PDF
基于Conv-Attention-MLP的新能源汽车电池异常检测方法
12
作者 陈旭东 何宏 周焱平 《科技资讯》 2024年第4期98-102,共5页
在新能源汽车电池异常信号的检测方面,针对传统异常检测方法对多个维度电池数据检测精度低、泛化性差等问题,提出一种融合了卷积(Conv)、自注意力机制(Attention)和多层感知机(Multilayer Perceptron,MLP)的Conv-Attention-MLP深度神经... 在新能源汽车电池异常信号的检测方面,针对传统异常检测方法对多个维度电池数据检测精度低、泛化性差等问题,提出一种融合了卷积(Conv)、自注意力机制(Attention)和多层感知机(Multilayer Perceptron,MLP)的Conv-Attention-MLP深度神经网络方法。该方法首先对多个维度的时序数据使用特征卷积进行降维,再利用多头自注意力机制(MultiHead-Self-Attention,MSA)对数据的时间不同步以及数据逻辑之间的重建模,最后经过多层感知机(MLP)的连续线性映射与非线性运算,产生复杂的分段映射,以达到更好的拟合效果。实现了对多个维度电池数据的有效检测,提高了模型对于多样化数据的准确性和稳健性。实验结果表明:相较于传统异常检测方法,在vloongs数据集上Conv-Attention-MLP模型表现效果更加优越,展现出更高精度和更强的鲁棒性。 展开更多
关键词 深度学习 异常检测 自注意力机制 模型融合
下载PDF
基于双向LSTM-Attention模型的火电厂负荷预测研究
13
作者 陈恩帅 茅大钧 +1 位作者 陈思勤 魏立志 《电力科技与环保》 2024年第4期380-387,共8页
准确预测电厂负荷可指导火电厂制定发电计划和调度安排,有利于降低能源成本和污染物排放,对电厂的经济性和环保性有重要意义。本文提出一种基于双向LSTM-Attention的火电厂负荷预测方法。首先,通过皮尔逊系数筛选出关键特征变量;其次利... 准确预测电厂负荷可指导火电厂制定发电计划和调度安排,有利于降低能源成本和污染物排放,对电厂的经济性和环保性有重要意义。本文提出一种基于双向LSTM-Attention的火电厂负荷预测方法。首先,通过皮尔逊系数筛选出关键特征变量;其次利用双向长短期记忆网络提取关键变量之间的长期依赖关系与短期变化特征,最后融合注意力权重机制以进一步突出关键时序信息,进而实现负荷的准确预测。以某在役600 MW超临界机组为对象进行验证。结果表明:相较于单向LSTM、双向LSTM、单向LSTM-Attention,本文所提方法的决定系数R^(2)、均方根误差S_(RMSE)和平均绝对误差S_(MAE)均为最优,分别为0.9566、16.3159、13.5043,能更准确地捕捉到负荷快速波动的趋势,为电厂的负荷预测和能源管理提供可行的方法。 展开更多
关键词 火电厂 负荷预测 双向LSTM模型 attention机制 能源管理
下载PDF
高速公路施工控制区动态交通流预测的LSTM-BiGRU-Attention模型
14
作者 韩晓 陈昕 肇毓 《交通科技与经济》 2024年第1期17-23,共7页
为提前准确预知高速公路施工控制区交通流变化趋势,解决交通流时间序列中的长期依赖问题,文中建立了高速公路施工控制区动态交通流预测的LSTM-BiGRU-Attention模型。首先,将预处理后的动态交通流数据集按时间步长顺序输入到LSTM网络,对... 为提前准确预知高速公路施工控制区交通流变化趋势,解决交通流时间序列中的长期依赖问题,文中建立了高速公路施工控制区动态交通流预测的LSTM-BiGRU-Attention模型。首先,将预处理后的动态交通流数据集按时间步长顺序输入到LSTM网络,对交通流信息建模和学习。然后,引入BiGRU和Attention机制以更好地捕捉上下文信息和提供更具针对性的权重分配。最后,将构建的LSTM-BiGRU-Attention模型与其他模型进行交通流预测对比,评估模型性能。实验以G35济广高速公路某施工控制区交通运行情况为案例进行研究,结果显示该模型的平均绝对误差MAE为1.91,均方根误差RMSE为2.83,决定系数R^(2)为0.79,平均绝对百分数误差MAPE为3.23。对比其他模型,LSTM-BiGRU-Attention模型的4个评估指标均有所下降,说明该模型可为高速公路施工控制区提供更加精准的预测。 展开更多
关键词 交通管理与控制 交通流预测 LSTM-BiGRU-attention模型 动态交通流 实验对比
下载PDF
基于Attention注意力机制下的鱼群韧性研究
15
作者 杜常金 刘磊 《智能计算机与应用》 2024年第4期209-214,共6页
生物集群运动可以自组织实现群体涌现行为,但是在外界因素的影响之下,生物集群是否能够保持韧性,单体是否能够根据当前信息重新交互仍然面临巨大的挑战。在攻击体的干扰之下,本文根据红鼻剪刀鱼的运动数据,设计Attention注意力模型。模... 生物集群运动可以自组织实现群体涌现行为,但是在外界因素的影响之下,生物集群是否能够保持韧性,单体是否能够根据当前信息重新交互仍然面临巨大的挑战。在攻击体的干扰之下,本文根据红鼻剪刀鱼的运动数据,设计Attention注意力模型。模型考虑到单体鱼与攻击体和周围邻居鱼之间的信息交互,预测下一时刻单体出现的具体位置,说明Attention注意力模型能够使生物的集群韧性与自组织运动保持一致。实验结果表明,所提的Attention注意力模型能够较好的解释生物集群韧性,增强生物集群韧性的鲁棒性和灵活性,为复杂系统解释内外部之间的联系提供了有力的支撑,该方法对生物控制领域的分布式管理也有很好的借鉴作用。 展开更多
关键词 复杂系统控制 attention注意力模型 生物集群韧性
下载PDF
A Dual Attention Encoder-Decoder Text Summarization Model
16
作者 Nada Ali Hakami Hanan Ahmed Hosni Mahmoud 《Computers, Materials & Continua》 SCIE EI 2023年第2期3697-3710,共14页
A worthy text summarization should represent the fundamental content of the document.Recent studies on computerized text summarization tried to present solutions to this challenging problem.Attention models are employ... A worthy text summarization should represent the fundamental content of the document.Recent studies on computerized text summarization tried to present solutions to this challenging problem.Attention models are employed extensively in text summarization process.Classical attention techniques are utilized to acquire the context data in the decoding phase.Nevertheless,without real and efficient feature extraction,the produced summary may diverge from the core topic.In this article,we present an encoder-decoder attention system employing dual attention mechanism.In the dual attention mechanism,the attention algorithm gathers main data from the encoder side.In the dual attentionmodel,the system can capture and producemore rational main content.The merging of the two attention phases produces precise and rational text summaries.The enhanced attention mechanism gives high score to text repetition to increase phrase score.It also captures the relationship between phrases and the title giving them higher score.We assessed our proposed model with or without significance optimization using ablation procedure.Our model with significance optimization achieved the highest performance of 96.7%precision and the least CPU time among other models in both training and sentence extraction. 展开更多
关键词 Text summarization attention model phrase significance
下载PDF
A 3D attention U-Net network and its application in geological model parameterization
17
作者 LI Xiaobo LI Xin +4 位作者 YAN Lin ZHOU Tenghua LI Shunming WANG Jiqiang LI Xinhao 《Petroleum Exploration and Development》 2023年第1期183-190,共8页
To solve the problems of convolutional neural network–principal component analysis(CNN-PCA)in fine description and generalization of complex reservoir geological features,a 3D attention U-Net network was proposed not... To solve the problems of convolutional neural network–principal component analysis(CNN-PCA)in fine description and generalization of complex reservoir geological features,a 3D attention U-Net network was proposed not using a trained C3D video motion analysis model to extract the style of a 3D model,and applied to complement the details of geologic model lost in the dimension reduction of PCA method in this study.The 3D attention U-Net network was applied to a complex river channel sandstone reservoir to test its effects.The results show that compared with CNN-PCA method,the 3D attention U-Net network could better complement the details of geological model lost in the PCA dimension reduction,better reflect the fluid flow features in the original geologic model,and improve history matching results. 展开更多
关键词 reservoir history matching geological model parameterization deep learning attention mechanism 3D U-Net
下载PDF
融合PMV物理方程和Attention-LSTM神经网络的铁路客站旅客舒适度模型研究
18
作者 刘小燕 邵长虹 +4 位作者 李瑞 李超 陈瑞凤 徐春婕 梁博 《中国铁路》 北大核心 2024年第5期16-24,共9页
铁路客站的舒适度直接关系着旅客的出行体验和满意度。选取聊城西站作为研究对象,采用PMV物理方程、Attention-LSTM神经网络模型以及PMV&Attention-LSTM融合模型3种方法,针对旅客舒适度开展综合评估与分析。在模型构建过程中,运用... 铁路客站的舒适度直接关系着旅客的出行体验和满意度。选取聊城西站作为研究对象,采用PMV物理方程、Attention-LSTM神经网络模型以及PMV&Attention-LSTM融合模型3种方法,针对旅客舒适度开展综合评估与分析。在模型构建过程中,运用了标准化处理、数据集划分、网格搜索交叉验证等技术寻找最佳超参数,并记录了训练过程中的损失函数和均方误差。在模型预测中,充分考虑了温度、湿度、风速、空气质量、二氧化碳、光照、噪声等环境因素对旅客舒适度的影响。对比3种预测方法,结果显示,融合模型在考虑多维环境数据时可更准确地反映舒适度水平,表明该模型更适应铁路客站的复杂环境条件,可为提高候车厅舒适性提供更为可靠的参考依据。 展开更多
关键词 铁路客站 旅客舒适度 PMV attention-LSTM神经网络 融合模型 聊城西站
下载PDF
基于LSTM+Attention模型的典型配电台区短期负荷预测方法
19
作者 黄朝凯 林洪浩 +2 位作者 王柯成 陈晓瑜 卢海明 《微型电脑应用》 2024年第8期88-91,共4页
为解决配电区短期负荷难预测,导致负荷调度不均匀问题,研究基于长短期记忆网络+注意力机制(LSTM+Attention)模型的典型配电台区短期负荷预测方法。考虑节假日、正常作息以及气温等不同变化因素导致的短期负荷变化,确定区域划分单元中各... 为解决配电区短期负荷难预测,导致负荷调度不均匀问题,研究基于长短期记忆网络+注意力机制(LSTM+Attention)模型的典型配电台区短期负荷预测方法。考虑节假日、正常作息以及气温等不同变化因素导致的短期负荷变化,确定区域划分单元中各负载与影响因素间关系,集群分析负载抽样数据,根据不同成分特征向量的贡献率,统计负荷变化影响因素数量,利用长短期记忆网络充分存储历史信息,凭借注意力机制模型确定输入向量和网络中隐含层的实际状态值以及地区负载的主要参数,计算归一化后电力负载的实际概率密度,得出短期负荷预测结果。实验结果表明,所提方法响应速度快,预测准确度高,预测效果和拟合优度理想。 展开更多
关键词 长短期记忆网络 attention模型 短期负荷 负荷预测 配用电信息
下载PDF
基于BERT-Attention-BiLSTM的多特征主题情感分析
20
作者 马律倩 《智能计算机与应用》 2024年第5期205-208,共4页
关注微博用户对于事件的情感倾向,有利于平台了解用户心声,也能为决策者的舆情处理工作提供参考和方向。然而,当前大部分微博情感分析研究仍是基于文本的,忽略了表情、图片等要素。针对上述问题,本文提出了一个多模型融合的情感分析模型... 关注微博用户对于事件的情感倾向,有利于平台了解用户心声,也能为决策者的舆情处理工作提供参考和方向。然而,当前大部分微博情感分析研究仍是基于文本的,忽略了表情、图片等要素。针对上述问题,本文提出了一个多模型融合的情感分析模型,以BERT预训练模型为基础,融合情感词典,并采用双向LSTM获取文本特征,有效联系前后文,并引入注意力机制,同时提出了一种emoji表情特征计算方法,得到一个情感分类更准确的多特征主题情感分析模型。 展开更多
关键词 情感分析 注意力机制 预训练模型 深度学习
下载PDF
上一页 1 2 94 下一页 到第
使用帮助 返回顶部