面向图书馆数字化转型的数据架构内涵、方法与策略

[目的/意义]数据架构作为一个将数字技术融入业务、实现组织在数字空间发展的方法论框架,是解决图书馆等传统组织在数字空间数字化解构与重组等实际问题,促进数字化转型与智慧化发展的关键。[方法/过程]结合当前图书馆数字化进程中的理论研究与实践现状,首先对数据架构相关概念与定义、功能与目标进行分析,得到图书馆数据架构的内涵;在此基础上,提出了图书馆数据架构的建构方法;最后,系统地探讨了图书馆实施数据架构的路径与策略。[结果/结论]图书馆数据架构主要基于数据思维,通过业务解构和业务重组,实现业务逻辑由物理空间向数字空间的翻译与转化;可通过对关键业务实体、具体场景的数据建模,以及数据流动与整合规划等图书馆数据架构策略,为实现图书馆数字化转型服务。

基于大数据架构的地球物理观测数据管理系统

中国地震地球物理观测网络的核心业务软件“十五”地震前兆数据管理系统已运行十多年,随着观测数据量的增长,数据库的读取和统计查询的性能逐渐降低。此外,管理系统存在SQL注入和跨站脚本攻击等漏洞的安全问题,系统架构难以满足业务发展的需求。中国地震台网中心基于分布式组件的大数据架构,使用消息中间件和时序数据库等技术对管理系统进行重构,将原来存储于Oracle数据库中的地球物理观测数据、基础信息、产品数据等按照各自特点在时序数据库中建表,并将历史数据和增量数据都迁移到新的时序数据库,显著提升了系统读写和统计性能、数据的安全性和可用性(多副本技术)。分布式和容器化等技术的引入,增强了系统的高可用性,并可通过横向扩展进一步增加系统的处理能力。

基于双活数据架构的既有旅客服务系统优化方案研究

为满足铁路旅客服务的业务提升需求,文章分析既有独立部署和应用的铁路旅客服务系统(简称:旅服系统),整合系统业务流程和数据结构,提出基于双活数据架构的既有旅服系统优化方案,并对其功能进行优化设计;研究通用化的广播设备控制器、导向设备控制器和检票子系统接口机,满足设备状态监控及数据同步的需求。目前,优化后的旅服系统已在雅加达—万隆高速铁路(简称:雅万高铁)的4个车站部署应用。该系统易于部署,通用性与可维护性强,降低了运营维护成本,为旅客提供了更加便捷和高效的服务。

油气资源地质调查大数据架构与应用初探

阐述油气资源地质调查的重要性,分析油气资源地质调查大数据架构,从系统操作流程、基础地质功能、省区信息功能、物理勘探功能、油气资源功能及油气资源督查功能几方面详细探讨油气资源地质调查大数据架构的具体应用。

业务型主站数据库从Oracle到MySQL数据架构迁移的设计

探讨了业务型主站数据库选型从Oracle到MySQL迁移的原因、数据架构设计思路、注意事项及具体实现方式。通过对Oracle和MySQL的对比分析,明确了MySQL作为业务型主站数据库的可行性。介绍了数据架构的设计思路、注意事项和具体实现方式,并通过实例分析验证了迁移的实践效果。

基于大数据架构的环境污染精准监测与决策平台的建设

在大数据时代背景下,利用大数据技术构建环境污染监测系统的优势在于可以将大量的数据源整合在一起,通过分析这些数据,实现更加准确、及时地进行环境污染监测和管理,从而为环境保护工作提供了有力的支持。基于此,文章重点研究基于大数据架构的环境污染精准监测与决策平台的建设,旨在促进企业绿色生产,保护生态环境。

某抽水蓄能电站工程信息化数字化数据架构及数据平台设计

近年来抽水蓄能行业发展迅速,其工程信息化数字化水平也不断提高。抽水蓄能电站工程数据具有庞大、多样、复杂等特点,本文结合某抽水蓄能电站工程实例,提出了数据资源体系、数据架构、数据流转、数据平台等方面的设计方案。数据资源体系方面,建设期分为基础类、管理监测类、分析决策类,运行期分为安全管控类、生产管理类。数据架构方面,设计为原始业务数据层、数据整合存储层、分析应用层三层。数据平台功能上包括数据集成、数据计算及存储、数据建模、数据管理、数据治理、数据服务、数据分析和数据服务体系。本文所述设计方案可为抽水蓄能电站全生命周期数字化设计和建设提供参考。

基于数据架构思想的图书馆数据治理研究

本研究旨在探索中国一流研究型大学图书馆的数据治理实践,以填补高等教育图书馆数据治理研究的空白。通过对30所一流大学网站和网页上公开发布的信息进行网络内容分析,收集和分析了数据。采用了数据治理检查清单作为评估工具,涵盖了数据治理机构、数据质量、数据访问或限制、数据安全、数据管理、所有权和角色、元数据文档和组织以及业务流程整合等七个标准。研究发现,大多数大学在数据访问或限制、数据治理机构和数据安全方面有着明确的政策和程序。此外,一些大学将信息治理扩展到整合数据治理或IT治理。然而,还需要进一步的研究来深入了解组织文化和价值观对数据治理的影响,并建立高等教育数据治理的统一模型或框架。

基于大数据架构的BP神经网络的用户用电评价与反窃电技术

对用户用电行为进行科学评价并预防窃电行为,是保障电网安全运行的重要措施。为提升针对用户的用电状态评价效果,本文以用户用电行为状态为主要研究对象,着重从BP神经网络的角度,探讨在大数据架构下发挥BP神经网络作用,在科学评价用户用电行为的同时,也能够提升反窃电技术水平的有效措施,旨在为电网安全运行和提升用户用电评价效果提供借鉴的思路和经验。

电信运营商数据架构设计方法初探

随着数字化进程的全面推进,数据要素在生产运营中的重要性越来越突出,各企业纷纷开始构建数据治理版图。数据架构作为数据治理的核心能力,是数字化转型的重要基础工作之一。对数据架构的内涵与作用进行分析,针对电信运营商的现状探讨数据架构设计方法。

企业轻量化大数据架构研究

对于很多中小型的大数据项目,应用MySQL等关系型数据库无法实现大数据的存储与计算,应用传统Hadoop大数据生态又太重,比较耗费人力、财力、服务器等资源。该文研究企业轻量化大数据架构的一种落地方案,并分析其应用场景。该文研究的轻量化大数据架主要针对企业应用中绝大多数结构化和半结构化大数据分析,数据量规模在1TB到10PB之间。轻量化架构采用MPP数据库(Doris)作为底层存储和计算引擎,Kafka作为数据接入缓冲通道,开发一体化轻量管理组件实现大数据开发中常用的任务调度、表管理、SQL开发、数据接入等功能。

新一代炼化智能工厂整体数据架构规划与综合数据库研发

高质量的数据是智能炼化工厂建设的基础,为保证数据质量和集成共享,全面梳理某新建炼化企业数据源、数据类型和流转关系,在数据治理和数据管理需求分析的基础上,规划了包括资源层、管理层、应用层和数据安全的企业整体数据架构,设计了面向业务的数据模型和面向物理对象的主数据,利用新一代信息技术,开发了融数据治理与数据管理于一体的综合数据库系统,为智能工厂构建统一的数据管理平台和共享中心。

试飞数据平台数据架构设计与应用

试飞数据是民机飞行试验的重要产物,具有测量参数数量大,数据体量大,飞行试验数据与试飞任务信息关联性强等特征,支撑飞机型号取证与设计优化等任务;试飞数据平台数据架构对多源异构数据集成接入、多类形态数据存储管理、多种层次数据处理分析等技术进行了研究,采用湖仓一体的关键技术和方法打造试飞数据全集;试飞数据接入采用流批一体的数据处理技术,融合Spark和Flink主流数据处理引擎,具备试飞数据快速入库能力;提出按秒聚合方法,具备PB级多维度试飞数据压缩存储功能,存储性能提升近10倍;采用以秒为索引条件支持快速检索,强化数据湖查询能力;研究数据仓库技术,设计试飞数据多层数据模型,具备多维信息精细查询,多层数据灵活钻取,多功能自定义函数集成等功能,并成功应用在某型国产民机的飞行试验数据管理中,服务于试飞数据用户,提高了试飞数据管理效率与试飞数据应用价值。

浅析新能源汽车数据架构及电池管理系统的通信方法

新能源汽车系统通信架构的变革是智能网联汽车进一步发展的必经之路。新能源车企为汽车行业带来新的开发理念和技术,向用户提供更加个性化和智能化的服务,基础是全车电子电气架构的数字化。而新能源汽车数字化电气架构的体系来源于各类通信方法,解决了不同系统之间的通信问题。

面向民机制造业的混合云数据架构

数字化技术的变革不断推动传统制造业走向数字化、智能化。民机行业作为高端复杂制造业,具有研制周期长、业务高度集成、全球供应商协同等特点,民机制造业数字化转型是引领我国制造业走向世界前列的历史机遇。数据数字化转型的核心,也是企业的核心资产。以某飞机制造企业为例,根据民机制造业特点,给出混合云数据架构设计框架。从业务需求引领的领域建模得到业务模型,依此构建数据模型和微服务独立开发,设计混合云数据架构,形成需求明确、业务拆分合理、服务开发和部署轻捷的完整闭环。在此数据架构下,初步对13类问题和12个核心子系统进行数据治理,取得6个数据库、9900张表对象等数据资产,治理效果明显。

基于大数据架构的异构系统数据集成技术研究与应用

针对当前z研究所各类业务系统数据孤立、信息不通等问题,为打通系统壁垒,实现数据联通,统一归类共享,并为后续数据挖掘分析提供底层支撑,文章研究实现了一种基于大数据架构的异构系统数据集成方法。根据z研究所典型业务系统多源异构等特征,结合多类别数据特性,融合多模式数据处理机制,通过设计一种高效且完备、安全可拓展的统一数据集成架构,并结合先进的大数据框架和技术进行实现,可定时、增量、并行地对多类异构系统实现数据统一抽取、转换和加载到数据仓库中,同时在实现过程中加入灵活便捷的可配置机制,使该方法更适用于实际多场景应用。该方法已在z所内决策支持系统建设过程中实际应用,完成项目管理、ERP等应用系统的数据集成,其面向异构数据源集成的高效性、准确性和灵活性都得到了有效的验证。

从高校业务架构到高校数据架构的思考

本文将企业级架构的概念引入高校数字化校园建设,结合高校实际情况,研究了数字化校园建设中有关业务架构和数据架构的构建问题,并对两者之间的对应关系和实践中需要注意的问题进行探讨,最后给出了高校数据架构的一种解决方案——共享数据中心。

基于大数据架构的军民融合频谱综合利用分析

高效利用海量频谱监测数据实现军民融合频谱综合利用是顺应世界新军事变革发展大势的必然要求。针对上述需求,重点提出基于大数据的军民融合频谱综合利用体系架构。在频谱数据汇集、频谱融合以及军民数据调度的工作原理基础上,构建民方申请军用频段和军方占用民用频段2种军民融合频谱综合利用方式的工作流程。通过军民融合频谱综合利用仿真试验验证所提内容的有效性。仿真结果表明,通过提出的体系结构和工作流程,可有效地获取军民共用频段信息,为实现提高频谱综合利用率奠定了基础。

基于XML的元数据架构

资源描述框架RDF是由W 3C发布的通用元数据架构 ,是一种开放式的元数据架构 ,为各类元数据的转换和交流提供了可能。本文主要分析RDF的数据模型、主要特点以及基于RDF的普通电子文档描述。

基于XML的元数据架构

资源描述框架 RDF是由 W3C发布的通用元数据架构 ,是一种开放式的元数据架构 ,为各类元数据的转换和交流提供了可能。本文主要分析 RDF的数据模型、主要特点以及基于 RDF的普通电子文档描述。