Milvus load 加载速度很慢!load so slowly!
创始人
2024-11-14 14:35:34
0

文章目录

  • 1. 现象描述
  • 2. 原因及解决方案
    • 2.1 load干了哪些事情?
    • 2.2 index原因推测
      • 2.2.1 服务器内存太小或者不足
      • 2.2.2 先设置Index再Insert数据

1. 现象描述

当你建立了一个milvus collection之后,collection.load()到内存时,速度很慢,比如20分钟没有结果,这是什么原因?

2. 原因及解决方案

2.1 load干了哪些事情?

我猜测:load函数的一个动作是将milvus计算好的index加入到内存中去。原因是:

  1. 如果在load前,没有设定index,那么load会报错提示你没有设定index。
  2. Milvus的所有相似计算,都是基于index进行的,所以load的时候一定会将index结果加载到内存。
  3. 建立好milvus的collection后,首次load时,有时会很耗时间,有时又不怎么耗时间。这是因为如果你在insert前,就create_index的,那么insert环节一并计算生成index,所以首次load只需要将结果load到内存,速度很快;如果create_index发生在insert环节后,那么load环节就会计算index,然后再加载到内存,显然load速度就会慢了。

由此推测,您的load函数非常慢,很有可能是index环节速度太慢或者出了问题!

2.2 index原因推测

2.2.1 服务器内存太小或者不足

向量百万,计算index,需要比较多的内存和计算量。看看您的机器是否内存不足了。

测试方法:找一个空的机器去,上milvus试一下,或者将现在milvus服务器释放一些内存试试。

2.2.2 先设置Index再Insert数据

相关内容

热门资讯

六分钟了解!雀神广东麻将提高胜... 您好,雀神广东麻将提高胜率这款游戏可以开挂的,确实是有挂的,需要了解加去威信【136704302】很...
黑科技技巧!潮汕汇游戏辅助&q... 黑科技技巧!潮汕汇游戏辅助"解谜辅助挂"切实真的是有挂(哔哩哔哩)1、潮汕汇游戏辅助有没有辅助教程、...
第六分钟了解!老友广东插件软件... 第六分钟了解!老友广东插件软件!竟然一直总是有辅助app(有人有挂)-哔哩哔哩1、实时老友广东插件软...
黑科技技巧!hhpoker这个... 黑科技技巧!hhpoker这个软件靠谱吗"开挂辅助插件"原来真的有挂(哔哩哔哩)1、hhpoker这...
第7分钟了解!微乐智能辅助ap... 第7分钟了解!微乐智能辅助app!原来有辅助方法(有挂教程)-哔哩哔哩在进入微乐智能辅助app软件靠...
透视插件!同城游辅助软件&qu... 透视插件!同城游辅助软件"了解辅助技巧"都是存在有挂(哔哩哔哩)一、同城游辅助软件可以开透视的定义与...
第6分钟了解!微信小游戏哥哥打... 第6分钟了解!微信小游戏哥哥打大a辅助器!原来一直都是有辅助神器(揭秘有挂)-哔哩哔哩1、完成微信小...
技巧辅助挂!潮友会辅助器&qu... 技巧辅助挂!潮友会辅助器"透视辅助方法"一直存在有挂(哔哩哔哩)1)潮友会辅助器有没有挂:进一步探索...
第3分钟了解!哈糖大菠萝怎么开... 第3分钟了解!哈糖大菠萝怎么开挂!一贯存在有辅助插件(有挂教学)-哔哩哔哩1、下载好哈糖大菠萝怎么开...
今天上午!卡五星辅助工具&qu... 今天上午!卡五星辅助工具"辅助辅助技巧"本来是有挂(哔哩哔哩)运卡五星辅助工具辅助工具,进入游戏界面...