分层强化学习研究进展

首先介绍了半马尔可夫决策过程、分层与抽象等分层强化学习的理论基础;其次,较全面地比较HAM、options、MAXQ和HEXQ四种典型的学习方法,从典型学习方法的拓展、学习分层、部分感知马尔可夫决策过程、并发和多agent合作等方面讨论分层强化学习的研究现状;最后指出分层强化学习未来的发展方向。

半参数模型解算的一种虚拟观测法

半参数模型中的非参数部分可以很好地描述测量数据处理规律不是十分明确的系统误差或模型误差,因而近年得到了测绘工作者的广泛重视。但目前半参数模型的各种解算方法主要还是沿用数学中提出的方法,例补偿最小二乘法,样条函数法,核光滑估计等。这些方法的特点是:所用的参数和语言都是纯数学的、相对抽象的,与具体应用中的实际意义关系不大,如何根据具体的问题确定方法中的有关量,没有成熟可靠的方法。本文首先介绍半参数回归中常用的补偿最小二乘法。然后基于先验信息,从纯测量学的观点讨论半参数模型的解算。即将对问题的先验信息转换成对问题的虚拟观测,用虚拟观测与原观测联合按常规的最小二乘方法求解。理论和实际都证明,该方法与最小二乘补偿法完全等价。从而在理论上得到一个重要的结论:半参数回归的补偿最小二乘法中的正则矩阵可由虚拟观测的观测方程系数确定,即,R=ATlAl,平滑因子可由观测方差与虚拟观测方差的方差比(权比)α=σ2L/σ2l确定,而该方差比可以在计算中用方差分量估计的方法确定。由此将半参数回归的解算与传统的测量数据处理方法有机地结合起来了。实例的计算结果表明,本文提出的虚拟观测方法计算的结果一般要优于常规的补偿最小二乘结果,基本上可达到常规补偿最小二乘法在理论上的最优解。

一类投资模型的能控性

讨论一类固定资产投资模型， 证明了系统的解的存在唯一性。

以画入影:金基德电影中的半抽象式叙事

金基德的电影大多具有浓郁的半抽象色彩,这种半抽象性不仅是一种叙事技法,而且是一种美学品格。从叙事技法层面看,金基德的作品除了秉持其一以贯之的宗教、性爱、暴力等主题外,在空间与情景建构、身份与人物关系、身体与性爱书写等诸多层面均彰显出半抽象的艺术特质;从美学品格层面看,金基德擅长利用空间、色彩、日常生活物等元素来建构一个充满象征的意象世界,并通过与现实世界的对照,实现对人的生活状态、人的情感、人性本质等问题的哲思。因而,唯有全面把握金基德作品中半抽象式的叙事技法,方能真正理解金基德作品的艺术内涵和美学风格。

抽象凸空间具有广义向量均衡约束的广义半无穷规划解的存在性

利用叠合点定理,在抽象凸空间中证明4种类型的具有广义向量均衡约束的广义半无穷规划解的存在性定理,并给出一个具体的例子来说明上述定理的条件是可以满足的.

分层强化学习原理研究

首先介绍了强化学习基本原理,分析了马尔科夫决策过程与半马尔科夫决策过程的理论基础及其在强化学习中的应用,其次阐述了分层强化学习中分层与抽象的思想,分析了HAM、Options与MaxQ等方法,并从分层与抽象角度进行了比较,最后指出了分层强化学习的研究发展方向。

抽象凸空间上弱KyFan点的存在性及其等价描述

为获得非紧集上不具有任何连续性函数的弱KyFan点的存在性及其等价描述,利用KKM方法和非线性分析中经典的不动点各种等价描述证明思想方法,得到空间不具线性结构、函数定义域不具紧性和函数不具任何连续性的条件下弱KyFan点的存在性及其等价性描述的一些结果.结果表明:弱KyFan点、弱KyFan截口点和弱Fan Browder不动点等的存在性等价.若增加空间的线性结构、定义域的紧性和函数的半连续性这些条件就能得到经典的KyFan点、KyFan截口点和Fan Browder不动点的存在性及其相应等价描述,是研究结论的特例.

半结构化数据的动态树存储模型研究

为了克服半结构化数据存储的不确定性,基于半结构化数据的结构信息可由其模式来描述的思想,提出一种动态树存储模型。在对对象交换模型OEM(Object Exchange Model)进行深度优先遍历,找出所有最大简单路径表达式基础上,采用累加计数原则将得到的最大路径表达式依次添加到一个动态树中,从而生成存储模型。最后将此模型映射到关系表中,实现了半结构化数据在关系数据库中的存储与查询。以村镇土地审批处理系统为实例来说明这种存储模型的有效性。

中文医学期刊中半结构式英文摘要的书写要领

目的:纠正中文医学期刊中英文半结构式摘要(SSA)书写中普遍存在的问题,提出SSA书写的基本要领。方法:举例列举了英文SSA书写中存在的繁简不当的问题:文题中遗漏了文章的重要元素、冠词的误用及使用缩略语等,“目的”及“结论”项的冗长陈述,“方法”及“结果”项的过于简化等;提出了修改建议及书写要领。结果:SSA书写应在内容充实、表达清晰的基础上做到“繁简适当:”文题中尽量不用缩略语、少用冠词;“方法”、“结果”项的写作要包括文章的基本元素、尽量是事实的陈述;“目的”、“讨论”项中注意一些冗词的处理等。结论:掌握SSA书写的基本要领,需做到英文摘要书写的繁简适当。

细微之处现大美——谈美国女画家乔治娅·欧姬芙的绘画风格

乔治娅·欧姬芙作为现当代艺术史上不容小觑的艺术家,其自成一派的绘画艺术被誉为纯美国风格的象征。将乔治娅·欧姬芙的艺术人生分为四期,结合她的心路历程和情感变化对其代表作品进行分析,探寻其绘画艺术风格的实质内涵。

一种基于HAMs体系的层次分解方法

在HAMs框架中引入策略耦合SMDPs的观点,定义了HAM-可分解概念,并明确了HAM机、HAM-可分解及策略耦合SMDPs这三者之间的关系,证明了HAM框架适合解决策略耦合SMDPs问题.在此基础上,针对一类具有有向无环图形式的策略耦合SMDPs问题,提出一种层次分解方法,并给出一个判断层次分解有效性的条件.最后使用一个典型的实验来说明该方法的特点.

可转移半连续条件下的Ky Fan不等式

对不具备连续性,但具有可转移半连续性的函数,已得到了一些关于最值等问题中的一些重要结果,利用半连续性的思想深入探讨了基于可转移半连续条件下抽象凸空间中,非线性分析中著名的Ky Fan不等式等问题,给出了几个推广结果。

拓扑空间内某些极小极大不等式、变分不等式

本文在 Komiya 引入的没有线性结构的抽象凸空间中,得到具有凸截口的集合族交非空定理,及一些极小极大不等式、极小极大等式和变分不等式.其结果是 Fan,Lassonde,Park 等作者结果的推广.

Existence results for generalized vector equilibrium problems with applications

By a coincidence theorem, some existence theorems of solutions are proved for four types of generalized vector equilibrium problems with moving cones. Applications to the generalized semi-infinite programs with the generalized vector equilibrium constraints under the mild conditions are also given. The results of this paper unify and improve the corresponding results in the previous literature.

多元二阶线性非齐次抽象方程的定解问题

本文利用多元半群理论证明多元二阶线性非齐次抽象方程的定解问题的存在唯一性,并给出解的积分表达式.

一类多元二阶抽象微分方程的Cauchy问题

本文运用多元半群理论证明了一类多元二阶抽象微分方程的 Cauchy 问题解的存在唯一性,并且给出解的积分表达式。

多元半群与一阶抽象微分方程

本文将一元半群推广到多元半群,讨论了多元半群的性质,并利用多元半群理论证明了n元一阶抽象微分方程的Cauchy问题解的存在唯一性,且给出解的积分表达式.

一个关于抽象经济的均衡存在定理

在抽象经济的均衡存在定理中，一般都假设偏好对应具有开图像。用一个较弱的条件代替关于偏好对应的开图像假设，证明了均衡的存在性。所得结果是Ｙａｎｎｅｌｉｓ（１９８７）均衡存在定理的一个推广．

基于Ontology的个性化推送系统

信息自动推送技术是在网络信息激增的背景下发展起来的。在传统信息推送系统中,用户模板是用加权关键词来表示的,由于没有考虑词之间的潜在关系,造成了系统推送质量的下降,文章设计并实现了一个基于Ontology的个性化推送系统CarInfo,把零散的关键词组织成一个网状结构,提供了一个用户特征的抽象视图,并且半自动的实现了本体的构建,通过实验验证了系统的可行性。

W-空间上的抽象变分不等式

提出了W拟凸(凹)的概念,得出了W拟凸(凹)的等价命题;然后在W空间框架下讨论了抽象变分式不等式,得到了它们的解的若干存在性定理,推广和改进了文[1]中定理4.2、定理4.1的紧性和连续性条件。