国内刊号:11-2560/TP
国际刊号:1000-9825
发布日期:
作者:陈梓浩,徐辰,钱卫宁,周傲英
单位:陈梓浩,华东师范大学 数据科学与工程学院, 上海 200062;上海市大数据管理系统工程研究中心(华东师范大学), 上海 20006211,徐辰,华东师范大学 数据科学与工程学院, 上海 200062;上海市大数据管理系统工程研究中心(华东师范大学), 上海 200062;广西可信软件重点实验室(桂林电子科技大学), 广西 桂林 54100402,钱卫宁,华东师范大学 数据科学与工程学院, 上海 200062;上海市大数据管理系统工程研究中心(华东师范大学), 上海 20006203,周傲英,华东师范大学 数据科学与工程学院, 上海 200062;上海市大数据管理系统工程研究中心(华东师范大学), 上海 20006204
关键词:大数据分析;矩阵计算;并行计算系统
基金:国家自然科学基金(61902128);广西可信软件重点实验室研究课题
在大数据治理应用中,数据分析是必不可少的一环,且具有耗时长、计算资源需求大的特点,因此,优化其执行效率至关重要.早期由于数据规模不大,数据分析师可以利用传统的矩阵计算工具执行分析算法,然而随着数据量的爆炸式增长,诸如MATLAB等传统工具已无法满足应用需求的执行效率,进而涌现出了一批面向大数据分析的分布式矩阵计算系统.从技术、系统等角度综述了分布式矩阵计算系统的研究进展.首先,从发展成熟的数据管理领域的视角出发,剖析分布式矩阵计算系统在编程接口、编译优化、执行引擎、数据存储这4个层面面临的挑战;其次,分别就这4个层面展开,探讨、总结相关技术;最后,总体分析了典型的分布式矩阵计算系统,并展望了未来研究的发展方向.
来源:2023年第3期
《软件学报》期刊编辑部