数据库间数据同步批量入库工具分析

针对在数据库之间进行数据同步时存在的问题,提出数据库间数据同步批量入库工具。对于多线程的算法,创建至少两个用于读取事务日志的子线程,并行读取源端数据库事务日志的不同内容块;每个子线程读取的内容块并行生成SQL执行语句、并行创建SQL文件,并将SQL文件的文件名写入待执行文件序列。对于单线程算法,通过解析源端数据库事务日志实现同步的技术背景下,批量执行SQL命令,提高数据同步效率。工具使得解析效率成倍提升,从而大幅提高数据同步效率。

国产化环境下全国不动产登记数据库集群架构设计及应用

全国不动产登记数据库承载了全国不动产客体、权利和权利人的空间和属性信息,其安全稳定运行事关权利人切身利益,一旦出现数据泄露或非法篡改的情况,将对不动产交易安全、权利人合法权益保护、国家经济社会安全稳定造成重大影响。为了推动全国不动产登记数据库向全国产化环境迁移适配,本文针对不动产登记数据特点,设计了基于国产数据库的全国不动产登记数据库读写分离集群架构,明确了全国不动产登记数据库从基于X86服务器的甲骨文(Oracle)数据库向全国产化环境下瀚高数据库集群的迁移路线,实现了50亿条级全国不动产登记数据库的数据迁移,有效保障了全国2800多个县(区)每日40多万条登记数据实时接入更新和日均20多万条查询响应,有效提升了数据安全并保护了权利人的合法权利。

软件定义 共享开源创新时代

软件的开发者希望能够亲自把控底层代码,而开源软件满足了这一诉求。经过几十年的发展,开源在操作系统、数据库、中间件等领域前景广阔。我今天想和大家分享的题目是"共享开源创新时代",谈及软件近20年的发展,一个绕不开的话题就是开源。在基础软件领域,开源的重要性在于其成本的低廉。软件应用的需求端追求的是仅付一次成本就能长期的使用应用软件。开发者大都希望底层的代码免费或是一次性付款,这样才能够完全在开发者本人的把控中。软件的开发商在操作系统上有一些共性的需求,如基础软件、支撑软件、中间件。数据库和中间件是标准化的产物,因此,我们希望runtime(运行库)能够开源化。

国产数据库发展之路

国产数据库的发展为什么不借助开源的数据库产品呢？借助开源产品可以直接获得源代码,免去重复“发明轮子”的工作,把有限的时间、精力、资金用在最需要解决的问题上.