有效

基于局部敏感哈希的多GPU密度峰值聚类方法

李东升、葛可适、苏华友
中国人民解放军国防科技大学

摘要

本发明属于数据挖掘领域,针对解决现有密度峰值聚类方法在解决大型和高维数据集聚类问题时计算复杂性太高、时间消耗太高的问题,提供一种基于局部敏感哈希的多GPU密度峰值聚类方法,包括四个过程:计算距离矩阵;计算局部密度;计算距离δ;计算聚类中心并指派类簇。核心思想是原始数据通过局部敏感哈希进行划分,并利用共享内存提高读写速度。这种方法充分利用局部敏感哈希将相似数据划分到相同GPU中,能够减少不必要的距离计算。而且设计多个哈希函数通过或运算对数据划分,减少相似数据被映射到不同GPU中,基于消息传递接口MPI实现多GPU统计方法,提高了参数计算速度。