-
题名大语言模型安全现状与挑战
被引量:15
- 1
-
-
作者
赵月
何锦雯
朱申辰
李聪仪
张英杰
陈恺
-
机构
中国科学院信息工程研究所
中国科学院大学网络安全学院
-
出处
《计算机科学》
CSCD
北大核心
2024年第1期68-71,共4页
-
文摘
大语言模型因其出色的文本理解和生成能力,被广泛应用于自然语言处理领域并取得了显著成果,为社会各界带来了巨大的便利。然而,大语言模型自身仍存在明显的安全问题,严重影响其应用的可信性与可靠性,是安全学者需广泛关注的问题。文中针对大语言模型自身的安全问题,首先从基于大语言模型的恶意应用问题切入,阐述提示注入攻击及其相应的防御方法;其次,介绍大语言模型幻觉带来的可信问题,对幻觉问题的量化评估、幻觉来源和缓解技术是当前研究的重点;然后,大语言模型隐私安全问题强调了个人及企业数据的保护问题,一旦在进行人机交互时泄露商业秘密和个人敏感信息,将可能引发严重的安全风险,当前研究主要通过可信执行环境和隐私计算技术来进行风险规避;最后,提示泄露问题关注攻击者如何窃取有价值的提示词进行获利或通过个性化提示词泄露个人隐私。提升大语言模型的安全性需要综合考虑模型隐私保护、可解释性研究以及模型分布的稳定性与鲁棒性等问题。
-
关键词
大语言模型
人工智能安全
恶意应用
模型幻觉
隐私安全
提示泄露
-
Keywords
Large language models
AI security
Malicious applications
Model hallucinations
Privacy security
Prompt leakage
-
分类号
TP389
[自动化与计算机技术—计算机系统结构]
-
-
题名一种基于模板的RSA-CRT模约减攻击方法
- 2
-
-
作者
马向亮
乌力吉
王宏
张向民
黄克振
刘玉岭
-
机构
清华大学集成电路学院
清华大学北京信息科学与技术国家研究中心
北京邮电大学集成电路学院
国家信息技术安全研究中心
中国科学院软件研究所可信计算与信息保障实验室
中国科学院信息工程研究所
中国科学院大学网络安全学院
-
出处
《电子学报》
EI
CAS
CSCD
北大核心
2024年第3期689-695,共7页
-
基金
中国互联网发展基金会资助。
-
文摘
目前针对RSA-CRT的建模类攻击研究较少,本文以模约减操作为研究对象,提出了一种针对RSA-CRT实现的模板攻击方法.该方法的核心是解决了如何由模约减后中间值的汉明重量恢复RSA-CRT私钥的难题.该方法的特点是基于模约减后中间值的汉明重量模型建模,通过采集选择密文模约减的能量迹进行模板匹配获取模约减后中间值的汉明重量,由汉明重量变化值恢复中间值,进一步恢复RSA-CRT算法的私钥.另外,该方法的优点在于理想情况下,基于中间值汉明重量模型建立的模板之间可以共用,且对中间值以多少位大小建模没有限制,可以选择字节大小,64位大小,甚至私钥p相同大小,实际环境中可根据泄露信息情况进行选取.最后,本文选择对中间值的最低字节进行建模,验证了该方法的可行性,并给出了防护建议.
-
关键词
模板攻击
RSA-CRT
选择密文
模约减
侧信道攻击
-
Keywords
template attack
RSA-CRT
chosen-ciphertext
modular reduction
side channel attack
-
分类号
TP309.1
[自动化与计算机技术—计算机系统结构]
-
-
题名Cache侧信道攻击防御量化研究
- 3
-
-
作者
王占鹏
朱子元
王立敏
-
机构
中国科学院信息工程研究所
中国科学院大学(网络安全学院)
-
出处
《信息安全学报》
CSCD
2024年第4期107-124,共18页
-
基金
国家科技重大专项(No.2018ZX01028101)
国家重点研发计划(No.2018YFB2202104)资助。
-
文摘
芯片安全防护技术关系到国家、企业和个人的信息安全,相关的研究一直是计算机安全领域的热点。片上高速缓存对芯片性能起着重要作用,可以有效提升芯片内核访问效率。传统的缓存设计并没有充分考虑安全性,侧信道攻击会对Cache造成巨大威胁,可以窃取加密密钥等内存存储敏感信息。攻击者利用侧信道的技术窃取用户的隐私数据或加密算法密钥时不会改变片上系统芯片的运行状态,从而使计算机系统很难检测是否受到了攻击。与基于电磁信号和基于能量检测的侧信道攻击相比,基于存储共享的侧信道攻击只需要利用软件测量就可以实现,对芯片安全的威胁更大。目前存在多种侧信道攻击和防御手段,但缺乏一套完善的关于系统架构的安全度量方法,对Cache的安全性进行有效评估。本文对Cache侧信道攻击和防御手段进行模型化分析,提出一套Cache安全性量化研究方法。首先,我们采用CVSS漏洞评分模型对Cache侧信道攻击进行量化评分。然后,利用贝叶斯公式,构建侧信道攻击和防御的关系模型。最后,通过图模型对Cache侧信道攻击机理进行建模,计算在防御架构基础上不同威胁的攻击成功率,并结合CVSS防御得分求得不同防御方法的得分。本文针对Cache侧信道攻击进行机理建模,对攻击和防御进行评估和探索,为硬件安全人员提供理论支持。
-
关键词
Cache侧信道
CVSS
贝叶斯模型
安全量化
安全架构
-
Keywords
Cache side channel
CVSS
Bayes model
security
security architecture
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名一种面向微服务的多维度根因定位算法
被引量:2
- 4
-
-
作者
施园
李杨
詹孟奇
-
机构
中国科学院信息工程研究所
中国科学院大学网络安全学院
-
出处
《信息网络安全》
CSCD
北大核心
2023年第3期73-83,共11页
-
基金
国家重点研发计划[2019YFB1005200,2019YFA1005201]。
-
文摘
伴随着Docker等虚拟化容器技术的逐渐成熟,因其可扩展性、灵活性等特点与微服务架构完美契合,工业界逐渐将微服务架构应用部署在基于容器的云环境下,并用Kubernetes等容器编排工具来管理应用的全生命周期。在这样复杂的微服务架构下,如何使用人工智能技术高效发现异常并且定位根因成为重中之重。首先,文章总结了在微服务系统环境下进行异常检测和根因定位所面临的主要挑战和现有的关键技术;然后,针对现有技术异常检测覆盖范围不全面的问题,文章提出了一种基于无监督学习的多维度的异常检测方法,在调用链Trace数据的基础上结合服务和机器资源利用数据进行综合分析,确保能够检测出服务响应时间异常的同时,也能够识别服务资源利用异常和环境异常;最后,在异常已知的情况下,为了减少根因定位时间,拓展定位范围和缩小粒度,文章提出了一种轻量的基于异常传播子图的方法,将服务接口和机器节点两种维度的数据统一到异常传播子图中进行根因定位。实验表明,文章所提方法与已有方法相比,定位时间更短,不仅拓宽了根因定位场景,而且准确率也有明显提升。
-
关键词
容器
微服务
Kubernetes
异常检测
根因定位
-
Keywords
container
microservices
Kubernetes
abnormal detection
root cause localization
-
分类号
TP309
[自动化与计算机技术—计算机系统结构]
-
-
题名虚拟现实全景图像显著性检测研究进展综述
被引量:15
- 5
-
-
作者
丁颖
刘延伟
刘金霞
刘科栋
王利明
徐震
-
机构
中国科学院信息工程研究所
中国科学院大学网络安全学院
浙江万里学院
-
出处
《电子学报》
EI
CAS
CSCD
北大核心
2019年第7期1575-1583,共9页
-
基金
国家自然科学基金(No.61771469)
-
文摘
随着虚拟现实处理技术的发展,虚拟现实全景图像的显著性检测成为近年来学术界和工业界关注的研究热点.本文分析虚拟现实全景图像的特性,综述虚拟现实全景图像显著性检测算法的研究进展.将已有的虚拟现实全景图像显著性检测算法进行分类、分析以及对比,本文总结了当前虚拟现实全景图像显著性检测面临的挑战,并对其发展趋势进行展望.
-
关键词
虚拟现实
VR全景图像
显著性检测
-
Keywords
virtual reality
VR panoramic image
saliency detection
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-