计算机工程与科学

北大核心,INSPEC,JST,CSCD扩展版,WJCI

国内刊号:43-1258/TP

国际刊号:1007-130X

计算机工程与科学杂志2024年第7期:基于分区层次图的海量高维数据学习索引构建方法

发布日期:

作者:华悦琳, 周晓磊, 范强, 王芳潇, 严浩,

单位:1.南京信息工程大学计算机学院、网络空间安全学院,江苏 南京 210044;2.国防科技大学第六十三研究所,江苏 南京 210007;3.国防科技大学大数据与决策实验室,湖南 长沙 410073

关键词:近似最近邻搜索,学习索引,层次可导航小世界图,分区学习,索引结构,

学习索引是破解海量高维数据近似最近邻搜索问题的关键。然而,现有学习索引技术结果仅局限于单个分区中,且依赖于近邻图的构建。随着数据维度和规模的增长,索引难以对分区边界数据进行精确判断,并且构建时间复杂度增大,可扩展性难以保障。针对上述问题,提出了基于分区层次图的学习索引方法PBO-HNSW。该方法对分区边界数据进行重新分配,并行构建分布式图索引结构,从而有效应对近似最近邻搜索问题所面临的挑战。实验结果表明,该方法能够在百万级海量高维数据上实现毫秒级的索引构建。当召回率为0.93时,PBO-HNSW方法构建时间仅为基线方法的36.4%。

来源:2024年第7期

《计算机工程与科学》期刊编辑部

查看计算机工程与科学杂志2024年第7期

联系我们

  • 地址:湖南省长沙市开福区德雅路109号
  • 电话:86-0731-87002567
  • E-mail:jsjgcykx@vip.163.com

咨询工作人员