专利名称:一种基于Flink的大规模矩阵并行化的计算方法专利类型:发明专利发明人:黄宜华,顾荣,张海鹏申请号:CN201510764595.2申请日:20151109公开号:CN105608056A公开日:20160525
摘要:本发明公开了一种基于Flink的大规模矩阵并行化的计算方法,主要包括以下步骤:利用FlinkDataSet对大规模矩阵数据进行存储,在单个计算机上对矩阵进行计算时采用BLAS对矩阵计算进行加速;设计并实现了矩阵的相加、相减等一系列矩阵操作;设计了并行化的方案并结合Flink和算法的特点设计了三种优化手段提升不同形状的矩阵相乘运算的性能,包括:基于方块划分方式的矩阵分块相乘、基于CARMA划分方式的矩阵分块相乘和基于广播方式的矩阵分块相乘。本发明解决了传统单个计算机情形下大规模矩阵计算开销大甚至无法计算的问题,具有很好地扩展性。
申请人:南京大学
地址:210093 江苏省南京市汉口路22号
国籍:CN
代理机构:苏州威世朋知识产权代理事务所(普通合伙)
代理人:杨林洁
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容