面向数据分发系统的改进型并行I/O研究

随着用户和业务复杂度的增加,数据仓库的数据对外服务能力急需提升,数据分发系统作为统一接口分发管理,不可避免地面对多用户数据访问的并发性通信阻塞问题。本文利用开源的Kettle工具构建数据分发功能应用,运用并行计算思想提升串行算法效率。在并行化过程中,详述了传统的数据分发收集并行I/O方案,并构建了时间估计方程。在分析总结其瓶颈问题的基础上,借鉴GoogleFileSystem的思想,提出了基于元数据的并行I/O改进型新方案。实验证明,不论并行计算进程数(计算单元数)多少,基于元数据的并行I/O方案比数据分发收集方案都具有更好的性能,数据导入、导出耗时更短。

陕西旬邑:创新思路 再谱华章

古豳旬邑,一颗镶嵌在渭北高原上的璀璨明珠,在这片厚重而又充满希望的热土上,广大干部群众围绕建设＂关中最美县＂这一目标,按照脱贫攻坚、追赶超越的总体要求,创新思路,负重奋进,用勤劳的双手编织追赶超越梦想,用坚实的脚步昂首迈向全面小康,演绎出一串串劈波前行的精彩音符,谱写了一篇篇砥砺奋进的铿锵乐章。