实验测试大数据一体机硬件网络以“机柜就是数据中心”为理念的MDC货架产品,采用标准机柜为基础单元,将供配电系统、散热系统、布线系统以及监控管理系统等集成到机柜平台之上,可单机柜使用,也可多机柜组合,为实验测试大数据平台建设提供了完整的基础架构解决方案。
软件系统采用Hadoop+Hbase+Spark的分布式结构,提供以下功能:
1、实验测试数据存储
采用基于测点对象的数据存储管理,它基于可测试性的业务体系,在数据存贮系统之上建立起一套通用的测试数据对象系统,实现数据的标准化且与数据库系统无关。这样在业务数据发生改变或者存贮数据的数据库系统更换时,基于测点对象进行数据模型的重构、数据的备份、恢复或使用等变得简单,数据资产得到保护,可以持续地发挥其价值,如后续的基于大数据技术的挖掘类应用。
2、实验测试数据分析
²实验数据实时分析;
²基于大数据技术的实验数据管理;
²基于大数据技术的海量实验数据挖掘;
²基于海量实验数据可视化;
²实现实验数据挖掘的工具化、平台化。