| 内存集群计算:交互式数据分析 |
| |
| 引用本文： | 黄岚,孙珂,陈晓竹,周敏奇.内存集群计算:交互式数据分析[J].华东师范大学学报(自然科学版),2014(5):216-227. |
| |
| 作者姓名： | 黄岚 孙珂 陈晓竹 周敏奇 |
| |
| 作者单位： | 1. 电子科技集团第三十二研究所,上海,200233
2. 华东师范大学数据科学与工程研究院,上海,200062 |
| |
| 摘 要： | 本文围绕大数据分类中决策数据的管理和分析进行展开.重点分析了大数据时代关于商务智能(Business Intelligence,BI)技术新的应用需求;讨论了计算机硬件和体系结构的发展为决策数据管理和分析带来的挑战和机遇;通过对新兴典型应用的分析和相关技术和系统特点的总结,说明了基于内存计算的高性能数据管理和分析技术是当前亟待解决的问题,具有广阔的应用前景.在全内存式(in-memory)数据管理环境下,网络通讯将成为整个系统的主要瓶颈.结合内存的特点(数据易失性、内存墙瓶颈),设计针对高性能服务器的无共享分布式内存系统拓扑结构;研究面向异构、多层次缓存和内存结构的分布式数据布局与索引策略,跨核、跨处理器、跨服务器的多粒度并行处理框架,缓存感知、内存感知的分布式数据一致性维护等关键技术,轻量级面向按列存储的数据压缩机制及压缩感知的数据处理机制,将是基于内存计算的高性能数据管理与分析技术的重点研究内容,并将最终实现实时交互式分析处理.
|
| 关 键 词： | 内存数据管理 缓存感知 迭代式处理 |
In-memory cluster computing: Interactive data analysis |
| |
| HUANG Lan,SUN Ke,CHEN Xiao-zhu,ZHOU Min-qi.In-memory cluster computing: Interactive data analysis[J].Journal of East China Normal University(Natural Science),2014(5):216-227. |
| |
| Authors: | HUANG Lan SUN Ke CHEN Xiao-zhu ZHOU Min-qi |
| |
| Institution: | HUANG Lan;SUN Ke;CHEN Xiao-zhu;ZHOU Min-qi;No.32 Institute,China Electronics Technology Group Corporation;Data Science & Engineering Institute,East China Normal University; |
| |
| Abstract: | |
| |
| Keywords: | in-memory data management cache sensitive iterative data processing |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
|
