基于多模态和知识蒸馏的教材知识图谱构建方法

为了高效构建教育领域多模态学科知识图谱,提出了基于大模型知识蒸馏和多模型协作推理的教材文本实体关系抽取算法。在模型训练阶段,利用闭源的千亿参数模型对文本数据进行标注,实现隐式知识蒸馏。然后对开源十亿规模参数模型进行领域数据指令微调,提升开源模型实体关系抽取任务的指令遵循能力。在模型推理阶段,闭源模型作为指导模型,开源的十亿规模参数模型作为执行模型。实验结果表明知识蒸馏、多模型协作、领域数据指令微调具有有效性,显著提高了基于指令提示的教材文本实体关系抽取任务的效果。提出了显隐式知识增强的教材示意图多模态命名实体识别算法。利用图像OCR、视觉语言模型等技术提取了教材示意图中的文字信息、全局内容描述信息。通过显式知识库检索增强和隐式LLM提示增强的方法,得到图像-标题对中可能关联的辅助知识,并将显式知识库和隐式LLM得到的知识进一步融合,形成最终的辅助知识。将示意图辅助知识和示意图标题进行拼接,实现教材示意图标题的多模态命名实体识别。实验结果表明,该算法具有先进性,同时增强了算法的可解释性。

基于协同训练的半监督图文关系抽取方法

为克服获取大量关系标记样本的昂贵代价,提出基于协同训练的半监督图文关系抽取模型,以利用大量无标记的数据来提升图文关系抽取的准确性。首先,基于图像和文本2种模态构建图像视图和文本语义视图,在标记数据集上训练2种不同视图的分类器;然后,将2种视图下的数据分别交叉输入另一视图的分类器,充分挖掘标记数据和未标记数据的信息,输出更准确的分类结果;最后,2种视图下的分类器对未标记数据进行预测,以输出一致的结果。在公开数据集VRD和VG上的实验结果显示,与6种较新的关系检测方法相比,该文方法图像视图和语义视图参数在VRD数据集上分别提升了2.24%、1.41%,在VG数据集上提升了3.59%。

中铁集装箱公司国内多式联运班列提质升级策略研究

中铁集装箱公司作为国有大型集装箱运输企业,扎实推进集装箱国际、国内货运代理、接取送达、堆存保管等现代物流服务产品,以“公转铁、散改集”作为重要突破口,大力发展铁路集装箱多式联运,全面深度融入我国多式联运体系,整体发展成效显著、增长动力持续显现。通过分析中铁集装箱公司国内多式联运班列发展情况、目前多式联运班列开行存在的问题与短板,提出以加快国内班列运输组织、物流产品、箱型装备、数字平台、内部协同、经营模式等“六个升级”为主线,推动中铁集装箱公司国内多式联运班列实现“质的有效提升”和“量的持续增长”的策略。

基于多源数据的多式联运路径生成方法

多式联运的路径生成是区域产业经济活动联系主导下,受多重因素影响的结果。鉴于此,基于基础设施网络、产业活动、区域生产联系以及货物运输活动等多源综合交通运输大数据,考虑运输方式和中转衔接等影响因素,构建了包括路径最优、时间最优、可靠性最优在内的多目标多式联运路径生成模型。在此基础上,比较不同运输方式和节点差异,借助BPR模型修正得到多方式多式联运阻抗模型,并选取长三角区域作为案例,研究了其中基于时效性差异的货物多式联运模拟路径。研究结果表明,起止点相同的情况下,以成本为偏好的路径结果费用最低,但耗时最长;以时间为偏好的路径结果耗时最少,但费用最高;以可靠性为偏好的路径结果耗时与费用居中,但抗风险和抗运输网络扰动的能力最强。研究揭示了不同需求偏好下的多式联运路径生成差异。

绿色低碳发展背景下的十堰市多式联运物流发展对策研究

多式联运发展是调整运输结构、降低物流成本、促进节能减排的重要措施,对建立健全绿色低碳循环发展经济体系有重要意义。十堰市多式联运发展过程中存在多式联运基础设施不完善、综合交通衔接融合发展不足、多式联运物流主体少、业务覆盖范围有限等问题。要促进十堰市绿色低碳经济发展,应着力做好多式联运基础设施规划建设,完善多式联运港站间交通衔接体系,培育壮大多式联运主体,推进多式联运公共信息平台建设。

经济漫画中的多模态隐喻及主体形象建构

新闻漫画是一种典型的多模态话语体裁,具有独特的语类特点。该文根据多模态隐喻理论,以新漫网筛选的经济新闻漫画为语料,探究其图文信息中多模态隐喻的类型和情感态度倾向,揭示国家主体经济形象建构策略。从多模态隐喻的表征特点和深层结构可以看出,经济漫画中运用结构隐喻、本体隐喻和方位隐喻,通过指涉源域和目标域的视觉符号和映射关系来创造意义潜势,建构独特的政治经济话语意义,塑造了自2020年新冠疫情暴发以来我国迎难而上、破浪而行的勇气和信念,展现了韧性强、潜力足、长期向好、引领全球经济复苏的领头羊这一国际经济主体形象,有效激发受众的情感共鸣。

多模态视阈下汉语教材中少数民族形象塑造分析

构建全面、真实的少数民族形象对传播中华民族文化,打破偏见与误解,优化国际汉语教材具有深刻的现实意义。本研究聚焦《走遍中国》《中文听说读写》《发展汉语》及《新实用汉语》四套国际汉语教材,以多模态话语分析及态度评价理论为依据,考察上述教材中少数民族形象的呈现方式、呈现内容及对少数民族的态度评价。研究结果表明,少数民族形象可通过“人物、地域、物质、行为、精神”五个维度共同塑造,所选教材的语言模态和视觉模态均体现出对少数民族的积极态度。但是,教材中仍存在对各民族关注度不均、模态使用单一、现代性特征不足等问题。

课程思政教学与专业知识技能教学的关系建构实例研究

本文基于课程思政教学实践,研究在教学中增加“思政”维度是否会挤压和分散学生对专业知识技能学习的时间和精力,探索思政教育与专业知识技能教学有机融合的高效的教学模式,建构二者之间的互促关系。《国际贸易理论》课程具体章节教学实例表明,通过在各教学环节中合理巧妙地选取多模态教学资料,使思政元素和专业知识技能二者融合为有机整体,并在各个教学环节中借助多模态教学手段,从而切实有效地建构二者的互促关系。

基于跨模态多维关系增强的多模态模型研究

针对当前多模态模型不能充分挖掘图像中非显著区域的空间关系和上下文间的语义关系,导致多模态关系推理效果不佳的问题,提出了一个基于跨模态多维关系增强的多模态模型(multi-dimensional relationship enhancement model,MRE),用于提取潜层结构下图像各要素之间的空间关系信息,并推理出视觉—语言间的语义相关性。设计了特征多样性模块用于挖掘图像中与显著区域相关的次显著区域特征,从而增强图像空间关系特征表示。同时设计了上下文引导注意模块来引导模型学习语言上下文在图像中的关系,实现跨模态关系对齐。在MSCOCO数据集上的实验表明所提模型获得了更好的性能,其中BLEU-4和CIDEr分数分别提升了0.5%和1.3%。将这种方法应用到视觉问答任务中,在VQA 2.0数据集上性能得到了0.62%的提升,证明了该方法在多模态任务方面的广泛适用性。

融合多模态特征的新闻短视频分类模型

视频分类是理解、归纳和检索视频数据的一个重要环节。新闻短视频具有音频信息比图像信息更能完整地描述新闻事件的特点,但传统视频分类模型常常只考虑图像信息或融合了音频和图像的多模态信息,并没有考虑模态信息之间的主辅关系。针对上述问题,采用以音频模态为主,图像模态为辅的融合机制,提出了融合多模态特征的新闻短视频分类模型。为进一步利用音频为主的特点,采用两阶段训练方式,使用音频模态单独训练,音频和图像模态联合训练,利用图像信息修正分类结果,提升新闻短视频分类的准确率。为训练和评价模型,采集了10304个新闻联播短视频作为实验数据集,总时长约为240 h。实验结果表明,所提模型的分类效果优于传统的新闻短视频分类模型。

空轨系统在铁路多式联运集疏运中的应用前景探讨

大力发展铁路多式联运对我国运输结构调整、铁路高质量发展具有重要意义,但铁路多式联运集疏运却一直面临着基础设施缺乏、运输效率低、运输成本高的问题。考虑到空轨系统能够较好地解决铁路多式联运集疏运物理层面的衔接难题,故探讨其在铁路多式联运集疏运中的应用前景。首先,分析铁路多式联运现有集疏运存在的问题及其发展方向;其次,介绍空轨系统的构成及作业流程,以青岛港前湾港区集装箱智能空轨系统为例对空轨系统的构成及优势进行说明,并分析了空轨系统在铁路端、码头端、物流园区端的集疏运作业流程;最后,结合空轨系统在青岛港前湾港区的应用经验以及SWOT分析,梳理了空轨系统的适用场景、建设要求以及研究方向。

一种基于预测的多式联运集装箱运输路径选择方法

当今世界经济全球化高速发展,贸易和物流活动在全球范围内活跃。集装箱多式联运作为一种高效的运输方式,已经成为全球物流运输业中不可或缺的一部分。然而,由于运输节点和线路的复杂性,如何选择最佳的运输路径一直是一个挑战。在过去的研究中,已经有学者提出了一些路径选择优化方法。但这些方法往往依赖于固定的历史数据,不能很好地应对未来不确定性的变化。因此,文章提出了一种集装箱多式联运路径选择优化方法,通过引入预测节点和线路的概念,改进了已有方法的局限性,以更准确和可靠的方式确定最佳运输路径。最后通过海铁联运路径查询系统验证所提方法的有效性。

面向乳腺超声的跨模态注意力网络

B型超声和超声造影是乳腺诊断中最常见的多模态数据,克服现有研究中广泛存在的肿瘤区域标注难、模态间关系剥离难、模态融合特征冗余的问题,能有效提升联合模态乳腺肿瘤诊断的准确率。该文提出了一个面向乳腺超声的跨模态注意力网络。该网络以双分支为基础结构。堆叠双模态数据分支能隐式地建立模态间的关系,同时提取单双模态数据特征。超声造影分支在缺乏手工标注的情况下,利用跨模态注意力模块,关注时空上的造影特征。最后利用压缩通道融合子网将两个分支融合,最大程度利用特征并降低模态融合特征冗余。在乳腺超声数据集BUS_Dataset上的实验表明,该网络优于现有乳腺肿瘤诊断方法。通过多项指标分析,该方法对乳腺肿瘤诊断具有较强的指导意义。

新闻类短视频关键帧摘要模型的研究与实现

根据传播学的“声画关系”理论,新闻类短视频通过音频直接有效地传达视频内容,属于典型的“主声说”视频。现有视频摘要技术忽略了声画关系对视频内容表现的影响,导致其在特定类型短视频摘要任务中效果不稳定。针对新闻类短视频“主声”的特点,提出基于多模态特征语义相似性的新闻类短视频关键帧摘要模型。与传统融合模型不同,该模型在提取多模态特征的基础上,构建公共语义空间,通过最小化对比损失函数对图像-文本对进行联合训练,实现音频文本摘要与视频帧之间语义相似性的跨模态度量,在摘要生成任务中重点关注与音频中语义信息描述一致的图像内容,利用音频中的语义信息筛选相关关键帧,得到更准确的短视频摘要。采集450条CCTV新闻短视频和385条Bilibili自媒体新闻短视频组成实验数据集,使用F1值衡量不同模型的性能,实验结果表明,该模型在2个数据集上F1值分别达到62.8%和51.2%,相较于MSVA模型分别提升了2.1和0.8个百分点,在新闻类短视频关键帧摘要任务中具有更好的性能。

联合运输研究综述

联合运输是在能源危机、交通拥堵及环境污染约束下的一种理想运输模式。在对1935年以来的95篇文献研究的基础上,对联合运输的研究内容进行整理及归类,并从联合运输的市场范围、集散运输优化、枢纽选择、运输方式选择、运输链管理及联合运输规划与政策等6个方面对联合运输研究内容、方法及结论进行阐述和分析。最后,提出联合运输领域有待于进一步研究的范围,并对联合运输的发展前景做了初步展望。

铁路通关便利化互联互通框架研究

根据《全球贸易安全与便利标准框架》,铁路通关便利的治理范围从关注口岸,前推后移至“入境前—口岸—出境”全过程,核心是实现数据流与业务流、物流的同步推进。为促进铁路通关便利,针对铁路跨境互操作需要,选取铁路口岸技术应用、跨境多式联运及旅客联程运输、政府间铁路国际合作3个场景,分析并精简适于技术、交付和政策3个层面互联互通的便利化框架,并验证可行性和有效性。此外,为满足实施需要,通过领域建模以近似自然语言的“4W1H”要素元模型,设计铁路跨境通关数据模型。在此基础上,设计主要基于公有云的跨境平台架构,结合近年来“关铁通”项目及部分国家(地区)的应用实例进行探讨。研究成果可以为“一带一路”铁路国际合作提供参考。

国内多模态话语分析研究述评

随着多媒体技术的产生与发展,如何将自然话语同多种模态结合起来进行分析解读是现代语言学,尤其是话语分析研究领域的重要课题。我国多模态话语分析研究主要涉及理论探讨、视觉应用、口语语料库建设、教学应用等领域。文章分析了我国多模态话语研究现状问题,并展望了未来研究方向。

UIC关于国际多式联运标准化工作的研究

在介绍国际铁路联盟(UIC)对国际多式联运的定义、多式联运工作组概况、多式联运研究报告、多式联运标准的基础上,总结UIC国际多式联运工作对我国的借鉴作用,从推广适用于我国的多式联运概念体系、集合相关行业力量开展多式联运研究、不断完善多式联运标准体系等3个方面,提出发展我国多式联运的建议。

论定域损失多式联运经营人赔偿责任的法律适用

定域损失多式联运经营人赔偿责任的法律适用在司法实践中一直存在争议。以18宗包含海运区段的涉外多式联运定域损失索赔案件为切入点,梳理定域损失发生时多式联运经营人赔偿责任和责任限额的法律适用差异,提出以下观点:《中华人民共和国海商法》第105条关于网状责任制的规定不具有强制适用性,其仅在将中国法律作为多式联运合同的准据法时才发挥实体法律适用规则的功能,并可指向域外实体法的适用。定域损失发生时,除中国作为缔约国参加的国际公约(条约)强制适用或者调整定域损失区段运输方式的第三国强制性规定(公共政策)为中国互惠承认外,应优先贯彻当事人意思自治原则,由当事人合意选择多式联运纠纷的准据法,当事人未明示选择的,依最密切联系原则确定多式联运合同适用的准据法。

集装箱铁水联运定价研究

指出我国铁路集装箱运输的定价主要依据箱型和运输距离分别计算运价率和运费,而公路和水路是根据市场供需波动灵活制定运价的,致使港口企业的经营成本与客户集装箱运输成本的增加,一定程度上影响了港口企业选择集装箱铁水联运的积极性。就存在问题将从集装箱铁水联运运价系统结构、铁路和水路运价特点及影响运价的运输市场供需关系等方面展开研究,拟找出适应集装箱铁水联运运营主体和需求主体且有利于综合运输市场有序竞争的定价方法。