基于自主CPU的云平台大数据中间组件研发

针对自主可控大数据实时处理和分析需求，突破基于国产龙芯CPU的大数据压缩和处理关键技术，在保证数据安全的基础上，解决龙芯CPU云平台下大数据生态支持及性能不足问题，从而实现三个技术目标：构建基于国产芯片的云平台大数据中间件体系结构；以容器虚拟化为基础构建大数据承载平台，实现数据实时处理分析及压缩技术；实现大数据中间件原型系统，为云平台下大数据处理提供可视化统一管理。
根据技术目标，本项目主要研发内容包括：
1、云平台环境下大数据中间件体系设计结构研究，突破当前国产芯片对大数据平台兼容性问题，实现云平台环境下Hadoop和Spark等平台运行，以及Docker容器虚拟化调度和动态扩容技术。
2、大数据处理分析关键技术研究，主要包括多源异构数据的查询和预测算法研究，支持结构化、非结构或半结构化数据的处理分析。
3、大数据分布式并行存储及压缩算法研究，并设计和开发云平台资源、数据资源的统一可视化管理软件。