电网非结构化数据管理平台研究与实现

随着大数据时代来临,数据被认为是企业重要的生产要素。提高非结构化数据的管理水平得到电网企业的重视。本文分析了电网企业非结构化数据的管理现状,提出采用大数据技术构建电网企业的非结构化数据管理平台。该平台采用Hadoop并行分布式计算架构和混合式存储采架构进行构建。文章阐述了非结构化数据管理平台的技术架构和应用架构,并结合电网企业实际简要论述了这种技术架构的先进性。

企业级非结构化数据管理平台研究及实践

非结构化数据是大型企业的宝贵数据资产,其基本特征是数据格式多样、数据存储分散、数据总量大、增长速度快,蕴含有提升企业管理水平的大量重要信息。非结构化数据的统一存储、集中管理与深化应用是当今大型企业信息化建设的重要方向之一。文章分析了非结构化数据管理平台建设的背景和关键需求,基于企业架构设计了平台架构、技术路线及部署模式,并介绍了平台在国家电网公司具体应用实践。实践证明研究成果可行、有效,能够极大促进企业非结构化数据资产的安全、高效利用,大幅提升非结构化数据的集约化管理水平,为企业解决非结构化数据的集中存储、有效利用等技术难题提供了重要的应用示范。

面向大数据的非结构化数据管理平台关键技术

大数据的有效管理是实现大数据处理的前提和基础。非结构化数据是当今大数据的主体。针对非结构化数据管理平台构造中的数据表示、数据操作与数据处理效率等关键问题,提出并论述了四面体数据模型、非结构化数据查询语言(UQL)及数据分布式存储与并行处理架构,并将上述技术在非结构化数据管理系统(AUDR)中进行了应用。

企业非结构化数据管理平台研究

提出在Linux集群上部署Hadoop开发框架,构建分布式的数据管理平台,实现了对企业海量非结构化数据的集中存储、统一管理以及分布式处理。平台所具有的高可靠性、高扩展性以及高吞吐率等特征为海量数据提供了不怕故障的存储和管理,为企业非结构化数据的有效利用提供了良好的解决方案。

非结构化数据管理平台备份与恢复机制的研究与建设

非结构化数据集中管理平台的研究与建设，将使分散在各个系统中的企业非结构化数据存储能进行有效整合和集中存储，以此建立全方位的非结构化数据中心。非结构化数据中心建立后，其备份和恢复也是一个需要着重考虑的问题。与其它的应用系统一样，数据备份是一个必不可少的部分。本文通过非结构化数据管理平台的建设研究了非结构化数据管理平台的备份与恢复机制。

基于企业架构的非结构化数据管理平台建设研究

非结构化数据是大型企业宝贵的数据资产,其基本特征是数据格式多样、数据存储分散、数据总量大、增长速度快,蕴含有大量提升企业业务价值的重要信息。非结构化数据的统一存储、集中管理与深化应用是当今大型企业信息化建设的重要方向之一。基于企业架构理论设计了非结构化数据管理平台的业务架构、技术架构、数据架构以及应用架构,对面向大型企业应用的非结构化数据管理平台进行了多视角建模,建立了从需求分析到系统设计的桥梁。

基于非结构化数据管理平台研究与建设

非结构化数据与结构化数据是计算机信息化系统中的两种数据形式,与数据结构规则、完整、可预定义模型、可二维逻辑表现的结构化数据相比,非结构化数据的格式更多、标准不统一,需要更智能的技术和平台进行存储、检索、内容挖掘和增值开发。对于企业、政府机构而言,非结构化数据中所包含的有用信息,难处理、难识别、难开发却必须开发,这是完整数据信息化的必要一步。企业开发建设非结构化数据管理平台,能够进一步提高企业信息的共享范围,提高员工交流、工作的效率,为领导层制定战略发展决策提供更完善的数据支持。本文从非结构化数据管理平台建设的难点入手,分析非结构化数据管理平台研究与建设的总方案,探讨非结构化数据管理平台的必要功能模块,希望可以为企业非结构化数据管理水平提升提供一些思路。

企业级非结构化数据管理平台分析

企业在经营管理的过程中会出现大量的非结构化数据,如果忽视对其进行数据价值挖掘,企业对市场的适应能力将被严重的削弱,所以企业级非结构化数据管理平台的构建越来越受到关注,本文以Linux集群为基础的Hadoop开发框架管理平台为对象,对企业非结构化数据管理平台架构、平台功能和特点展开研究,为提升企业级非结构化数据的管理水平作出努力。

基于非结构化数据管理平台的企业数字档案馆建设研究

近年来,越来越多的企业开始建设数字档案馆,旨在集中统一管理企业数字信息资源,尤其是2017年国家档案局发布《企业数字档案馆(室)建设指南》后,企业数字档案馆建设可谓如火如荼。经过近两年数字档案馆建设实践,笔者发现通过传统的做接口归档的数字档案馆建设模式存在很多问题,已经不再适合企业数字档案馆建设实际。为有效解决现存问题,本文提出了一种基于非结构化数据管理平台的数字档案馆建设模式。

大型企业非结构化数据管理平台设计

为了应对大型企业对非结构化数据的合理管理和有效应用两个方面要求,设计了非结构化数据管理系统平台,分析该系统平台的设计架构、接口设计、功能设计和主要功能模块。该系统可用于对企业各类非结构化数据的有效全生命周期管理,并拥有更好的客户体验,能够最大限度的贴合企业内容管理的特点,支持大规模,集团型的知识管理需求。

浙江省电力公司“非结构化数据管理平台”项目通过验收

2011年10月24日,国家电网公司试点项目＂非结构化数据管理平台建设＂验收会在杭州召开,验收组对浙江省电力公司承担的＂非结构化数据管理平台＂项目进行了验收审查并同意通过验收。浙江省电力公司是国网非结构化数据管理平台建设试点单位之一,平台建成投运,

辽宁省电力公司非结构化数据管理平台顺利通过国家电网公司验收

2013年4月16日，辽宁省电力公司非结构化数据管理平台顺利通过国家电网公司验收。2012年9月该项目启动，历经项目计划与准备、系统分析与设计、环境开发与部署、应用系统接入、历史数据迁移6个阶段，

大数据时代的文件结构化数据和非结构化数据管理

大数据开启了一次重大的时代转型,随着大数据时代的到来,各组织和个人更加意识到数据的重要性,数据已成为组织和个人的重要资产。其中文件的数据量占比非常大,无论是结构化数据还是非结构化数据,其发展要求都发生了较大变化。如何管理和应用好这些文件结构化和非结构化数据是许多组织面临的难题。本文将分析文件结构化和非结构化数据的现状,探讨文件数据结构化的意义,探索加强对文件结构化和非结构化数据管理的途径。

油气田非结构化成果数据库设计

当今对于石油行业这些将信息视为命脉的企业来说,如何对非结构化数据进行合理的存储和管理成为值得关注的问题之一。目前,国外油气田非结构化业务成果展示基本分散在不同的专业软件中,没有提供集中统一的Web端展示。而国内油气田非结构化业务成果展示也分散在不同的专业软件中。换句话说,国内油气田非结构化成果数据库平台亟待开发。因此,文章旨在研究和设计油气田非结构化成果数据库,同时围绕数字油田具体的应用需求,对系统中涉及的一些关键点进行了深入研究。

探索“冰山之下”的数据——中信证券非结构化数据处理平台知识产权布局及典型专利介绍

知识产权保护是金融科技创新的重要保障,不但可以确保企业创新成果的合法性和安全性,还可以激励内部技术创新、提升品牌形象和客户信任感,从而提高企业的影响力和竞争力。中信证券股份有限公司(以下简称“中信证券”)高度重视知识产权布局与建设,建立了完善的知识产权管理制度和管理机制,鼓励员工开展发明创造并积极申请知识产权,同时重视知识产权成果的推广应用,维护公司合法权益。

面向海量非结构化数据的非关系型存储管理机制

针对传统的关系数据存储系统性能不足、容错性差,无法适应海量非结构化数据管理的问题,提出一种高性能、高可用非关系型存储管理机制。首先,设计了良好的用户访问服务接口,通过高效的一致性哈希算法支持数据分发到多个存储节点;其次,采用可配置的数据副本机制改善存储系统的可用性;最后,提出查询故障处理机制,用以提升存储系统的容错性,避免节点失效导致服务中断问题。实验结果表明,在不同规模用户负载下,新的存储系统的并发访问请求能力和传统的文件系统、关系数据库相比,分别提升了30%和50%;同时,在合理响应时间内,故障状态下的存储系统的可用性损失小于14%。因此,该机制适用于海量非结构化数据的高效存储管理。

面向大数据的城市轨道交通非结构化数据管理

针对城市轨道交通大数据,分析了城市轨道交通非结构化数据的来源、类型和产生方式,讨论了非结构化数据的获取方式和组织策略,结合上海城市轨道交通实际情况提出了适用的城市轨道交通非结构化数据存储架构。

大数据环境下微信公众平台非结构化数据融合研究

微信公众平台具有开源、发布及时的特点,目前它已经成为各机构发布信息的重要渠道。但这类数据又具有非结构化、无语义描述的特点,如何将微信公众平台从非结构化数据转化为可分析、判断的结构化数据,成为一个亟须解决的问题。针对该问题,本文提出一个对微信公众平台结构化数据监测的层次体系。这一方法将通过数据融合方式,从平台资源中抽取数据,构建结构化数据库,进行权重比较,判断情报价值,进而实现对研究领域的态势监测。

在图书馆信息门户中管理非结构化数据

图书馆面临着如何有序地存储、管理并利用大量的、非结构化信息的问题。本文从信息门户理论出发,讨论了在图书馆信息管理领域对非结构化数据进行管理活动所面对的问题与解决途径,以及由此产生的利弊。