数据分级存储系统中数据分级算法研究

随着数据存储规模的海量增长,降低存储系统的总拥有成本,提高数据访问效率是海量数据分级存储系统的关键.在分析了两种典型的数据分级算法后,结合两种算法的优点对算法进行了改良,提出了基于数据访问频率和数据设备依赖度的自动分级算法,实验结果验证了算法的有效性和数据分级算法具有较高的准确率.

大数据时代数据分级存储优化方向研究

大数据时代的到来,使我国在现代化建设过程中对信息化技术的应用不断加深,这也使数据量增长速度不断加快,随之而来的数据存储问题也变得越来越突出。如何对海量数据进行有效存储,大幅提高数据访问率,保障数据安全,已经成为亟待解决的重要问题。而数据分级存储技术的出现,为这一问题的解决提供了可靠的技术支持。鉴于此,本文首先分析大数据时代数据分级存储及其基本要求,然后对数据分级存储的优化方向进行深入研究,以期为我国数据分级存储技术的优化与改进指明方向。

面向经营分析系统的数据仓库架构设计与存储研究

介绍经营分析系统的建设过程和实现思路,构建一种数据仓库的四层架构设计模式,结合经营分析系统的实践,引入生命周期管理技术和数据备份管理措施,给出一种基于四层架构设计模式的分级存储管理技术。实际应用表明,能有效提高设备的利用率及数据在线/近线的保有时长,保障数据的可恢复性和数据故障处理的及时性。

检验信息系统SQL数据库优化的研究

目的优化检验信息系统数据库,保证系统高效运行。方法使用系统自带以及资源监控软件监测检验信息系统服务器和数据库使用情况,针对存在的问题对系统进行优化。增加服务器内存至12 G,为不同的业务分别创建单独的表空间,采用分级存储策略,同时优化了SQL Server配置参数、查询语句及索引。结果实现了LIS使用存储过程和作业调度分时处理,保证了服务器的正常运行,同时也避免了更换服务器这种高额的硬件投资。结论以最小的经济价值及最短的时间,解决了运行十余年的检验信息系统数据库慢或者无法使用的问题。

大气环境智能监测平台的设计

针对大气环境监测海量数据处理困难、处理效率低等问题,设计了一种基于物联网技术的大气环境智能化监测平台,应用关系性数据库,实现数据的实时分级储存,通过Sqoop工具使数据在异构数据库间实时迁移,备份历史冗余数据,强化数据库储存能力,增强系统运行效率。平台集成了HBase协处理器与分布式搜索器(ElasticSearch),不仅能实现多条件数据检索,还可提供WebService数据接口,实现监测数据共享。经测试,该监测平台的安全性、兼容性及可靠性均满足要求。