基于tree-lib的大数据实时分析研究

为提高大数据的存储和并行处理能力,建立了以列存储infobright与分布式mysqlcluster为核心的大数据实时并发分析、管理模式,以完成对开源brighthouse引擎的二次开发。利用管理程序tree-lib对分布式大数据进行可视化监控、维护和管理。实验结果表明,infobright和cluster组合具备对大数据的高压缩存储、多并发查询和高效实时分析的能力,tree-lib完成对树和库的生成、检测、更新、备份和灾难恢复等,实现可视化双向管理和维护的目的。