一种新的基于值函数迁移的快速Sarsa算法

知识迁移是当前机器学习领域的一个新的研究热点.其基本思想是通过将经验知识从历史任务到目标任务的迁移,达到提高算法收敛速度和收敛精度的目的.针对当前强化学习领域中经典算法收敛速度慢的问题,提出在学习过程中通过迁移值函数信息,减少算法收敛所需要的样本数量,加快算法的收敛速度.基于强化学习中经典的在策略Sarsa算法的学习框架,结合值函数迁移方法,优化算法初始值函数的设置,提出一种新的基于值函数迁移的快速Sarsa算法——VFT-Sarsa.该算法在执行前期,通过引入自模拟度量方法,在状态空间以及动作空间一致的情况下,对目标任务中的状态与历史任务中的状态之间的距离进行度量,对其中相似并满足一定条件的状态进行值函数迁移,而后再通过学习算法进行学习.将VTF-Sarsa算法用于Random Walk问题,并与经典的Sarsa算法、Q学习算法以及具有较好收敛速度的QV算法进行比较,实验结果表明,该算法在保证收敛精度的基础上,具有更快的收敛速度.

基于值函数迁移的启发式Sarsa算法

针对Sarsa算法存在的收敛速度较慢的问题,提出一种改进的基于值函数迁移的启发式Sarsa算法(VFT-HSA)。该算法将Sarsa算法与值函数迁移方法相结合,引入自模拟度量方法,在相同的状态空间和动作空间下,对新任务与历史任务之间的不同状态进行相似性度量,对满足条件的历史状态进行值函数迁移,提高算法的收敛速度。此外,该算法结合启发式探索方法,引入贝叶斯推理,结合变分推理衡量信息增益,并运用获取的信息增益构建内在奖赏函数作为探索因子,进而加快算法的收敛速度。将所提算法用于经典的Grid World问题,并与Sarsa算法、Q-Learning算法以及收敛性能较好的VFT-Sarsa算法、IGP-Sarsa算法进行比较,实验表明,所提算法具有较快的收敛速度和较好的稳定性。

基于FAIMS谱图峰位置的离子迁移率非线性函数解析

离子迁移率的非线性函数反映了物质本身的微观碰撞特性,是FAIMS技术实现离子分离检测的基础。现有的离子迁移率非线性函数求解方法多是近似求解,存在较大误差。该工作提出了一种基于半正弦分离电压和FAIMS谱图峰位置下的严格求解方法,推导出严格的二阶、四阶系数求解方程。利用自制的高场不对称波形离子迁移谱仪分别对乙醇、间二甲苯和正丁醇三种典型的醇和苯类物质进行检测,获取了三种物质的FAIMS谱图,通过谱图峰位置获得了不同分离电压值下的补偿电压,利用最小二乘法求出三种离子非线性函数二阶、四阶系数。拟合后的均方误差表明FAIMS非线性函数严格求解的方法,明显优于现有的求解方法。有助于提高FAIMS检测分辨率,进而有助于建立更加准确的FAIMS图谱,实现FAIMS对检测物质的精准识别。

高场不对称波形离子迁移谱非线性函数系数误差分析

离子迁移率非线性函数系数α2和α4是高场不对称波形离子迁移谱(FAIMS)实现物质识别的基础。现有的α2和α4缺少先验值和误差分析方法,因此有必要建立关于α2和α4求解结果误差的评估标准,进而在此基础上提高α2和α4的求解精度。通过自制FAIMS分别对丙酮、异丙醇和1,2二氯苯三种物质在不同分离电压下的检测实验,获取样本在不同分离电压下的谱图和谱图特征值,运用组合的方法从多组分离电压值和相应补偿电压值的数据中选取指定组数,计算出大量的α2和α4数据。通过对α2和α4的数值分析,探究了α2和α4的分布特点和二者之间的相关性,研究了分离电压取点数量和取点方式对其求解结果误差的影响。在拟合α2和α4数据不同范围的频数后,发现α2和α4符合正态分布,其拟合度均在0.96以上,可以利用α2和α4分布的标准差来评估其求解结果的误差。通过对(α2,α4)散点进行拟合,发现α2和α4之间具有很强的负相关性,三样本的相关度分别为-0.977,-0.968,-0.992。随着分离电压选取点数的增加,其相应的求解结果误差在不断减少。通过不同分离电压取点方式的对比,发现当分离电压取VDmax和0.7 VDmax时求解结果最优。在保证α2和α4求解的准确性的前提下有效降低了检测次数,为FAIMS实现快速现场检测和精确的谱图解析创造了有利的条件。

面向RISC-V适配开发的x86 built-in函数转换方法

新兴架构RISC-V的生态建设需要将其他架构函数或软件包向RISC-V架构迁移适配。在研究GCC特定架构适配的built-in函数向RISC-V架构迁移时,提出一套x86到RISC-V的built-in函数转换方法,对于非扩展指令集(属非向量类型)built-in函数,采用RISC-V架构下相同功能的built-in或标准库函数替代;对于SSE扩展指令集built-in函数,建立数据类型映射和向量函数操作映射实现向RISC-V架构向量扩展函数或标准库函数的迁移,其中RVV函数迁移方式占比67%。实验结果表明:方法迁移的程序功能正确,方法有效。本文方法对其他扩展指令集built-in函数的迁移提供了指导,且与现有工作相比,更易扩展、覆盖面更广。

萘由水到水-叔丁醇混合溶剂的迁移热力学函数

通过溶解度法研究了萘从水到水-叔丁醇(TBA)混合溶剂中的标准迁移热力学性质.结果表明,标准迁移自由能随叔丁醇摩尔分数x(TBA)的增加表现出复杂的下降趋势.标准迁移熵和标准迁移焓呈现双峰变化迁移熵和迁移焓的双峰变化,表明系列H_2O-TBA混合溶剂的微观结构经历了从相对的有序到无序到再有序、再无序、再有序的变化过程;H_2O-TBA混合溶剂中除了在富水区存在着笼合物特殊结构外,在x(TBA)约为0.08处还存在着一相对有序的结构.

函数单向S-粗集的信度特征

利用函数单向S-粗集的结构,给出函数迁移的信度特征、函数集Q的下近似信度特征和函数集Q的上近似信度特征.利用这些结果,给出函数单向S-粗集的信度特征,提出函数单向S-粗集的随机结构与随机定理,得出函数单向S-粗集的结构是函数单向S-粗集的随机结构的特例,函数单向S-粗集的随机结构是函数单向S-粗集结构的一般形式.

新形势下对我国农村劳动力迁移问题的再思考——基于托达罗模型的迁移反应函数的反思

劳动力从农村流入城市是不可避免的历史趋势。在很多城市里,农村移民的速度已经超过了城市工作岗位的产生速度,超过了城市工业和社会服务的吸收能力。在经历多年的大规模农村移民潮之后,虽然近年来农村劳动力迁移总量在增加,但是增速却呈现放缓的趋势,也出现了一些新问题与新情况。本文结合新形势下我国农村劳动力的迁移现状,对托达罗模型的迁移反应函数进行了反思,并对此提出了对策和建议。

函数S-粗集的随机刻画

利用函数S-粗集理论和函数迁移的随机性,提出函数迁移的信度及信度函数的概念;给出函数单项S-粗集与函数双向S-粗集的随机生成;讨论了随机生成的函数S-粗集的数学结构及信度特征.

函数双向S-粗集的信度特征

利用函数双向S-粗集的结构,给出函数迁移的信度特征,函数集Q的下近似信度特征,函数集Q的上近似信度特征;利用这些结果,给出函数双向S-粗集的信度特征,提出函数双向S-粗集的随机结构与随机定理。函数双向S-粗集的结构是函数双向S-粗集的随机结构的特例,函数双向S-粗集的随机结构是函数双向S-粗集结构的一般形式。

变异函数S_p-粗集研究

利用函数S-粗集理论和属性函数迁移的随机性,提出了属性函数迁移的信度及信度函数的概念,讨论了变异函数Sp-粗集的随机生成以及变异函数Sp-粗集的结构和特性.

函数单向S-粗集对偶的信度特征

利用函数单向S-粗集对偶的结构,给出函数迁移的信度特征,函数集Q′的下近似信度特征,函数集Q′的上近似信度特征,利用这些结果,给出函数单向S-粗集对偶的信度特征,提出函数单向S-粗集对偶的随机结构与随机定理。函数单向S-粗集对偶的结构是函数单向S-粗集对偶的随机结构的特例,函数单向S-粗集对偶的随机结构是函数单向S-粗集对偶结构的一般形式。

混合云存储架构下分布式大数据异步迁移系统设计

在大数据呈爆发式增长情况下,采用传统迁移系统存在迁移响应速率慢的问题,针对该问题,设计了混合云存储架构下分布式大数据异步迁移系统。采用主从同步服务器,通过SQL thread线程读取,实现数据库主从同步与分离。依据大数据迁移流程,分析时长和访问频率,由此获取迁移函数,在混合云存储架构下,对敏感数据集进行判断,实现对迁移函数最大数据集的迁移。系统运行结果表明,混合云存储架构下设计的系统迁移响应速率更快,优化了迁移系统性能。

基于S-粗聚合决策的粒子群优化

针对动态系统中存在的因素规律分布问题,基于函数S-粗集,利用粒子群优化算法,提出S-粗聚合体、C*-粗聚合体的概念,给出C*-粗聚合决策矩阵及其生成分布矩阵,并给出了相应的适应度函数和函数迁移族及粒子迁移算法,实现了基于S-粗聚合体且同时满足不同分布律约束的决策,最后给出了基于C*-粗聚合决策的粒子群优化应用。

奇异粗糙集理论及其研究现状

简要介绍Pawlak粗糙集概念,着重介绍奇异集合、奇异粗糙集的基本概念,奇异粗糙集的两种结构,奇异粗糙集与Pawlak粗糙集的关系,以及奇异粗糙集的研究现状。

PNFSM测试用例生成的研究

The paper proposes one test case generation algorithm tor partial/y-specified nondeterministictinite state machine and its validity analysis. After comparing with other generation methods, someproblems of testing object state diagram are given.

人口发展模型预测城市人口老龄化问题研究

运用人口发展模型,利用统计数据,拟合模型中相关函数对城市人口按年龄结构进行预测,通过对预测结果的分析,了解城市人口年龄结构变化趋势,以及人口老龄化对产业经济带来的重大影响。文章对老龄化现象进行了预测,对于我国今后步入老龄化社会后可能出现的社会问题进行研究,为管理者制定相关的人口政策提供了数据支持。

混合溶剂中碳酸盐热力学研究ⅡNa_2CO_3＋NaHCO_3＋NaCl＋15％葡萄糖＋水体系

混合溶剂中碳酸盐热力学研究ⅡＮａ_２ＣＯ_３＋ＮａＨＣＯ_３＋ＮａＣｌ＋１５％葡萄糖＋水体系杨家振，袁长波（辽宁大学化学系沈阳１１００３６）葡萄糖对溶剂水性质的影响，以及混合溶剂中葡萄糖与碳酸盐，碳酸氢盐和氯化物的相互作用，是生理学，生物化学和化学热力?..

一个基于两区间八边形约束的抽象域

抽象解释静态程序分析技术用来发现运行时错误,保证程序正确性,已经被成功应用到工业界。抽象域是抽象解释理论中的一个重要方面,然而大部分已存在的数值抽象域无法表示程序的非凸性质,抽象域的这种凸性限制很多时候会影响数值分析的精度,甚至带来更多误报。基于两区间八边形约束,提出了一个新的数值抽象域,其约束形式为x±y∈[a,b]∪[c,d],其中x和y表示变量取值,a,b,c,d∈R。该抽象域的域元素是用两区间八边形约束表示,因此可以表达某类非凸性质,表达能力强于经典的八边形抽象域,并且相对于八边形抽象域,域操作的计算复杂度并没有提高太多。

Symmetry Breaking Ground States of Bose-Einstein Condensates in 1D Double Square Well and Optical Lattice Well

We investigate the phenomena of symmetry breaking and phase transition in theground state of Bose-Einstein condensates (BECs) trapped in a double square well and in an opticallattice well, respectively. By using standing-wave expansion method, we present symmetric andasymmetric ground state solutions of nonlinear Schroedinger equation (NLSE) with a symmetric doublesquare well potential for attractive nonlinearity. In particular, we study the ground state wavefunction's properties by changing the depth of potential and atomic interactions (here we restrictourselves to the attractive regime). By using the Fourier grid Hamiltonian method, we also reveal aphase transition of BECs trapped in one-dimensional optical lattice potential.