Milvus load 加载速度很慢!load so slowly!
创始人
2024-11-14 14:35:34
0

文章目录

  • 1. 现象描述
  • 2. 原因及解决方案
    • 2.1 load干了哪些事情?
    • 2.2 index原因推测
      • 2.2.1 服务器内存太小或者不足
      • 2.2.2 先设置Index再Insert数据

1. 现象描述

当你建立了一个milvus collection之后,collection.load()到内存时,速度很慢,比如20分钟没有结果,这是什么原因?

2. 原因及解决方案

2.1 load干了哪些事情?

我猜测:load函数的一个动作是将milvus计算好的index加入到内存中去。原因是:

  1. 如果在load前,没有设定index,那么load会报错提示你没有设定index。
  2. Milvus的所有相似计算,都是基于index进行的,所以load的时候一定会将index结果加载到内存。
  3. 建立好milvus的collection后,首次load时,有时会很耗时间,有时又不怎么耗时间。这是因为如果你在insert前,就create_index的,那么insert环节一并计算生成index,所以首次load只需要将结果load到内存,速度很快;如果create_index发生在insert环节后,那么load环节就会计算index,然后再加载到内存,显然load速度就会慢了。

由此推测,您的load函数非常慢,很有可能是index环节速度太慢或者出了问题!

2.2 index原因推测

2.2.1 服务器内存太小或者不足

向量百万,计算index,需要比较多的内存和计算量。看看您的机器是否内存不足了。

测试方法:找一个空的机器去,上milvus试一下,或者将现在milvus服务器释放一些内存试试。

2.2.2 先设置Index再Insert数据

相关内容

热门资讯

我来教大家!皇豪互娱真的有挂(... 我来教大家!皇豪互娱真的有挂(辅助挂)好像真的有挂(的确有挂)-哔哩哔哩;超受欢迎的皇豪互娱真的有挂...
揭秘关于!哈糖大菠萝洗牌(辅助... 揭秘关于!哈糖大菠萝洗牌(辅助挂)其实真的是有挂(有挂详情)-哔哩哔哩;详细哈糖大菠萝洗牌攻略(哈糖...
查到实测!皮皮跑胡子(辅助挂)... 查到实测!皮皮跑胡子(辅助挂)切实真的有挂(有挂技巧)-哔哩哔哩相信很多朋友都在电脑上玩过皮皮跑胡子...
一分钟秒懂!顺欣茶楼辅助是真的... 《一分钟秒懂!顺欣茶楼辅助是真的(辅助挂)一向真的有挂(了解有挂)-哔哩哔哩》 顺欣茶楼辅助是真的软...
今日重大通报!拱趴大菠萝看牌规... 您好:拱趴大菠萝看牌规律这款游戏可以开挂的,确实是有挂的,很多玩家在这款游戏中打牌都会发现很多用户的...
玩家必看攻略!趣玩娱乐辅助器(... 玩家必看攻略!趣玩娱乐辅助器(辅助挂)从前存在有挂(有挂方式)-哔哩哔哩;趣玩娱乐辅助器最新软件透明...
科普常识!三哥玩摆头注辅助(辅... 科普常识!三哥玩摆头注辅助(辅助挂)本来是真的有挂(有挂方式)-哔哩哔哩;是一款可以让一直输的玩家,...
一分钟了解!荔枝竞技有挂(辅助... 一分钟了解!荔枝竞技有挂(辅助挂)好像是真的有挂(详细教程)-哔哩哔哩是一款可以让一直输的玩家,快速...
免费测试版!浙江宝宝游戏(辅助... 【福星临门,好运相随】;免费测试版!浙江宝宝游戏(辅助挂)竟然是真的有挂(真实有挂)-哔哩哔哩;暗藏...
终于清楚!闲娱江西棋牌打盾系统... 终于清楚!闲娱江西棋牌打盾系统发好牌(辅助挂)本来真的有挂(有挂解密)-哔哩哔哩是一款可以让一直输的...