期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
Cloudless-Training:基于serverless的高效跨地域分布式ML训练框架
1
作者 谭文婷 吕存驰 +1 位作者 史骁 赵晓芳 《高技术通讯》 CAS 北大核心 2024年第3期219-232,共14页
跨地域分布式机器学习(ML)训练能够联合多区域的云资源协作训练,可满足许多新兴ML场景(比如大型模型训练、联邦学习)的训练需求。但其训练效率仍受2方面挑战的制约。首先,多区域云资源缺乏有效的弹性调度,这会影响训练的资源利用率和性... 跨地域分布式机器学习(ML)训练能够联合多区域的云资源协作训练,可满足许多新兴ML场景(比如大型模型训练、联邦学习)的训练需求。但其训练效率仍受2方面挑战的制约。首先,多区域云资源缺乏有效的弹性调度,这会影响训练的资源利用率和性能;其次,模型跨地域同步需要在广域网(WAN)上高频通信,受WAN的低带宽和高波动的影响,会产生巨大通信开销。本文提出Cloudless-Training,从3个方面实现高效的跨地域分布式ML训练。首先,它基于serverless计算模式实现,使用控制层和训练执行层的2层架构,支持多云区域的弹性调度和通信。其次,它提供一种弹性调度策略,根据可用云资源的异构性和训练数据集的分布自适应地部署训练工作流。最后,它提供了2种高效的跨云同步策略,包括基于梯度累积的异步随机梯度下降(ASGD-GA)和跨云参数服务器(PS)间的模型平均(MA)。Cloudless-Training是基于OpenFaaS实现的,并被部署在腾讯云上评估,实验结果表明Cloudless-Training可显著地提高跨地域分布式ML训练的资源利用率(训练成本降低了9.2%~24.0%)和同步效率(训练速度最多比基线快1.7倍),并能保证模型的收敛精度。 展开更多
关键词 跨地域分布式机器学习(ML)训练 跨云ML训练 分布式训练框架 serverless 跨云模型同步
下载PDF
基于异质信息融合的网络图像半监督学习方法 被引量:3
2
作者 杜友田 李谦 +1 位作者 周亚东 吴陈鹤 《自动化学报》 EI CSCD 北大核心 2012年第12期1923-1932,共10页
网络图像通常包含文本、颜色和纹理等异质信息.本文提出了一种基于多类异质信息融合的网络图像半监督学习方法—局部协同训练(Local co-training,LCT).该方法在每个视图(对应一类信息)上对每个样本点的邻域构建线性局部模型,利用一组局... 网络图像通常包含文本、颜色和纹理等异质信息.本文提出了一种基于多类异质信息融合的网络图像半监督学习方法—局部协同训练(Local co-training,LCT).该方法在每个视图(对应一类信息)上对每个样本点的邻域构建线性局部模型,利用一组局部模型来表示数据关系;基于信息传播和协同训练对模型进行增量式迭代更新.该算法在协同训练和基于图正则化的方法这两类半监督学习算法间建立了桥梁.局部协同训练算法能够准确地描述样本的复杂分布,并且可以进行高效的增量学习,有利于大规模网络图像的在线学习.在Corel,Pascal和ImageNet数据集上的实验结果表明该方法具有良好的性能. 展开更多
关键词 网络图像分类 异质信息 局部协同训练 机器学习
下载PDF
面向超高清视频质量评估方法的初探 被引量:1
3
作者 龙皋月 杨利中 《广播电视网络》 2023年第4期105-109,共5页
随着超高清视频时代的到来,视频作为对物理世界的数字还原,持续向更高清的画质和更实时的交互的目标演进。本文从第一性原理出发,分析了影响超高清视频质量的底层关键因素,介绍了ITU(国际电信联盟)最新的超高清流媒体视频质量评估方法,... 随着超高清视频时代的到来,视频作为对物理世界的数字还原,持续向更高清的画质和更实时的交互的目标演进。本文从第一性原理出发,分析了影响超高清视频质量的底层关键因素,介绍了ITU(国际电信联盟)最新的超高清流媒体视频质量评估方法,并对该评估方法进行了初步探索。结合笔者的工作实践提出一个面向机顶盒的超高清视频质量评估方法。 展开更多
关键词 质量评估模型 机器学习模型训练 视频质量评估方法
下载PDF
一种运用SVM分类的多源态势数据关联方法 被引量:1
4
作者 李川 黄威 +1 位作者 孙伟 郝欢 《电讯技术》 北大核心 2022年第12期1809-1812,共4页
阐述如何利用多手段获取的战场多源目标态势数据生成战场态势一张图,进一步提高海上方向的监控能力。针对多源目标态势数据存在的时空误差、属性模糊等问题,提出一种运用支持向量机(Support Vector Machine,SVM)分类的多源态势数据关联... 阐述如何利用多手段获取的战场多源目标态势数据生成战场态势一张图,进一步提高海上方向的监控能力。针对多源目标态势数据存在的时空误差、属性模糊等问题,提出一种运用支持向量机(Support Vector Machine,SVM)分类的多源态势数据关联方法。运用机器训练学习方式,获取不同误差下的多源态势关联,识别非线性特征参数,构建多源态势数据关联算法模型,有效形成目标批号和时空位置的唯一性。通过模拟真实数据进行验证,结果表明该算法实现效果较好,在多源态势融合方面具有较好的实用价值。 展开更多
关键词 多源态势融合 多源态势关联 机器训练学习 支持向量机(SVM) 特征样本
下载PDF
人工监督神经网络在煤层裂缝发育区识别中的应用 被引量:1
5
作者 仇念广 《中国煤炭》 2020年第4期32-36,共5页
针对在地震属性应用中难以精细识别煤层裂缝发育区边界的难题,开展了基于人工监督神经网络技术的煤层裂缝发育区应用研究。从地震资料中获取倾角导向体以提取高质量的地震属性,以多属性为指导进行人工拾取样点,并基于多层感知器进行神... 针对在地震属性应用中难以精细识别煤层裂缝发育区边界的难题,开展了基于人工监督神经网络技术的煤层裂缝发育区应用研究。从地震资料中获取倾角导向体以提取高质量的地震属性,以多属性为指导进行人工拾取样点,并基于多层感知器进行神经网络机器训练学习,建立裂缝的最优属性集,拓展整体数据后获得裂缝概率体,从而识别划分出煤层裂缝发育区。该技术在山西阳泉新元矿区进行了应用,煤层裂缝发育区的识别结果明显优于属性直接识别,但勘探区内暂无钻井资料,预测效果还有待进一步验证。 展开更多
关键词 人工监督神经网络 机器训练学习 地震属性 裂缝发育区
下载PDF
终端真伪验证方法技术综述
6
作者 马文文 《中国科技纵横》 2022年第18期39-41,共3页
针对当前仿造终端等电子产品的现象横行的情况,本文分别介绍了基于终端标识、终端硬件信息、日志记录、标签及图形码、机器训练学习、区块链、动态验证码的终端真伪验证技术,并针对每种真伪验证技术辅以专利申请进行深入介绍,使得相关... 针对当前仿造终端等电子产品的现象横行的情况,本文分别介绍了基于终端标识、终端硬件信息、日志记录、标签及图形码、机器训练学习、区块链、动态验证码的终端真伪验证技术,并针对每种真伪验证技术辅以专利申请进行深入介绍,使得相关人员对终端真伪验证方法有更详尽的了解。本文针对上述各种终端真伪验证技术的优缺点进行分析对比,为后续的深入研究提供参考。 展开更多
关键词 真伪 检测 验证 标签 图形码 日志 机器训练学习 区块链 动态验证码
下载PDF
An Accurate and Extensible Machine Learning Classifier for Flow-Level Traffic Classification 被引量:2
7
作者 Gang Lu Ronghua Guo +1 位作者 Ying Zhou Jing Du 《China Communications》 SCIE CSCD 2018年第6期125-138,共14页
Machine Learning(ML) techniques have been widely applied in recent traffic classification.However, the problems of both discriminator bias and class imbalance decrease the accuracies of ML based traffic classifier. In... Machine Learning(ML) techniques have been widely applied in recent traffic classification.However, the problems of both discriminator bias and class imbalance decrease the accuracies of ML based traffic classifier. In this paper, we propose an accurate and extensible traffic classifier. Specifically, to address the discriminator bias issue, our classifier is built by making an optimal cascade of binary sub-classifiers, where each binary sub-classifier is trained independently with the discriminators used for identifying application specific traffic. Moreover, to balance a training dataset,we apply SMOTE algorithm in generating artificial training samples for minority classes.We evaluate our classifier on two datasets collected from different network border routers.Compared with the previous multi-class traffic classifiers built in one-time training process,our classifier achieves much higher F-Measure and AUC for each application. 展开更多
关键词 traffic classification class imbalance dircriminator bias encrypted traffic machine learning
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部