ModaHub

ModaHub魔搭社区：向量数据库Milvus性能优化问题（三）

目录 Milvus 的导入性能如何？ 边插入边搜索会影响搜索速度吗？ 批量搜索时，用多线程的收益大吗？ 为什么同样的数据量，用 GPU 查询比 CPU 查询慢？ Milvus 的导入性能如何？ 客户端和服务端在同…

ModaHub魔搭社区：向量数据库Milvus产品问题（一）

目录产品问题 Milvus 会收费吗？ Milvus 支持非 x86 平台吗？ Milvus 支持对向量的插入、删除、更改和查询操作吗？ Milvus 可以处理百亿或千亿级数据吗？ Milvus 数据存储在哪里？ 为什么我在 SQLite / MySQL 找不…

ModaHub魔搭社区：VectorDBBench的工作原理和目标

目录 VectorDBBench工作原理 VectorDBBench目标 VectorDBBench工作原理 VectorDBBench不仅仅是主流矢量数据库和云服务的基准测试结果，它还是您进行最终性能和成本有效性比较的首选工具。VectorDBBench的设计考虑到了易用性，旨在帮助用户，甚…

ModaHub魔搭社区：向量数据库Milvus性能优化问题（一）

目录性能优化问题为什么重启 Milvus 服务端之后，第一次搜索时间非常长？ 为什么搜索的速度非常慢？ 如何进行性能调优？ 应如何设置 IVF 索引的 nlist 和 nprobe 参数？ 性能优化问题为什么重启 Milvus 服务端之后…

WinPlan经营大脑：精准预测，科学决策，助力企业赢得未来

近年，随着国内掀起数字化浪潮，“企业数字化转型”成为大势所趋下的必选项。但数据显示，大约79%的中小企业还处于数字化转型初期，在“企业经营管理”上存在着巨大的挑战和风险。 WinPlan经营大脑针对市场现存的企业经营管理难题，提供一站式解决方案，助力企业经营管理转型…

ModaHub魔搭社区：Milvus 数据迁移工具 – MilvusDM

目录 Milvus 数据迁移工具 — MilvusDM 简介功能介绍 Faiss to Milvus Milvus 数据迁移工具 — MilvusDM 简介 MilvusDM 是一款针对 Milvus 研发的数据迁移工具，支持 Milvus 数据传输以及数据文件的导入与导出： Faiss to Milvus：将未…

ModaHub魔搭社区：向量数据库Milvus产品问题（二）

目录为什么向量距离计算方式是内积时，搜索出来的 top1 不是目标向量本身？ 对集合分区的查询是否会受到集合大小的影响，尤其在集合数据量高达一亿数据量时？ 如果只是搜索集合中的部分分区，整个集合的数据会全部加载…

ModaHub魔搭社区开源AI Agent开发框架和评测

AI 模型社区魔搭（ModaHub）又上新了，推出适配开源大语言模型的 AI Agent 开发框架 ModaHub-Agent。借助 ModaHub-Agent，所有开发者都可基于开源 LLM 搭建属于自己的智能体应用，最大限度释放想象力和创造力。ModaHub-Agent 的代码现已开源。 AI Agent（AI 智能体、AI 代理）…

ModaHub魔搭社区：GPTCache的工作原理和为什么选择 GPTCache？

什么是 GPTCache？ GPTCache 是一个开源工具，旨在通过实现缓存来提高基于 GPT 的应用程序的效率和速度，以存储语言模型生成的响应。GPTCache 允许用户根据其需求自定义缓存，包括嵌入函数、相似度评估函数、存储位置和驱逐等选项。…

大禹智库：下一代向量数据库————具备在线化，协作化，可视化，自动化和安全互信的向量数据库

目录一、在线化二、协作化三、可视化四、自动化五、安全互信结论： 行业分析报告：下一代向量数据库的特征摘要： 向量数据库是一种用于存储和处理向量数据的数据库系统。随着人工智能和大数据技术的快速发展，向量数据…

《向量数据库指南》让「引用」为 RAG 机器人回答增加可信度

在之前的文章中，我们已经介绍了如何用 Milvus 向量数据库以及 LlamaIndex 搭建基础的聊天机器人《Chat Towards Data Science ｜如何用个人数据知识库构建 RAG 聊天机器人？》《书接上回，如何用 LlamaIndex 搭建聊天机器人&#xff…

玩转中文AI模型攻略——ModaHub魔搭社区攻略

目录 1. 注册和登录： 2. 浏览和搜索： 3. ModaHub排行榜： 4. AI应用导航： 5. 向量数据库： 6. 企业Chatbot： ModaHub魔搭社区是一个中文AI模型开源社区，旨在为开发者和研究者提供一个交流、…

ModaHub魔搭社区：为什么选择Zilliz Cloud？

目录 Zilliz Cloud是什么？ 为什么选择Zilliz Cloud？ 基于Milvus构建，针对性能进行优化弹性和可扩展按需付费多云支持（AWS、GCP） 云原生的可靠性企业安全和治理 Zilliz Cloud基于Milvus的云原生服务 Zilliz…

ModaHub魔搭社区：向量数据库Milvus使用 MySQL 管理元数据教程

目录使用 MySQL 管理元数据常见问题数据管理相关博客使用 MySQL 管理元数据 Milvus 默认使用 SQLite 作为元数据后台管理服务，SQLite 内嵌于 Milvus 进程中，无需启动额外服务。但是在生产环境中，基于可靠性的考虑，我们强烈…

ModaHub魔搭社区：详解向量数据库Milvus的Mishards：集群分片中间件（二）

目录元数据服务发现元数据元数据记录了底层数据的组织结构信息。在分布式系统中，Milvus 写节点是元数据唯一的生产者，而 Mishards 节点、Milvus 写节点和读节点都是元数据的消费者。目前版本的 Milvus 只支持 MySQL 和 SQLite 作为元数据的存储后…

ModaHub魔搭社区：向量数据库MIlvus服务端配置（一）

目录服务端配置配置概述 Milvus 文件结构配置修改编辑配置文件运行时修改 server_config.yaml 参数说明 cluster 区域 general 区域 network 区域服务端配置配置概述以下配置说明可同时应用于单机或者分布式场景。 Milvus 文件结构成功启动 Milvus 服务后…

ModaHub魔搭社区：Milvus的工作原理和为什么选择Milvus？

目录为什么选择 Milvus？ Milvus 的工作原理是什么？ Milvus 由存储层和计算层组成，为了增强弹性和灵活性，Milvus 中的所有组件都是无状态的。系统由四个层级组成： Milvus 用于什么？ 如今，已…

ModaHub魔搭社区专访百度智能云李莅：您认为向量数据库是一个刚需产品吗？

ModaHub魔搭社区：可以看到，大模型火了以后，向量数据库受到了特别高的关注，您是如何看待这种现象呢？您认为向量数据库是一个刚需产品吗？ 李莅：是的。大模型是在今年才崭露头角，或者说…

ModaHub魔搭社区：详解向量数据库Milvus的Mishards：集群分片中间件（三）

目录链路追踪日志路由链路追踪分布式系统错综复杂，请求往往会分发给内部多个服务调用。为了方便问题的定位，我们需要跟踪内部的服务调用链。系统的复杂性越高，一个可行的链路追踪系统带来的好处就越明显。我们选择了已进入 CNCF 的 …

ModaHub魔搭社区：腾讯发布的向量数据库Tencent Cloud VectorDB有哪些核心能力？

腾讯发布的向量数据库有哪些核心能力？ 腾讯云刚刚发布的向量数据库Tencent Cloud VectorDB主要具备以下能力： 高性能向量存储、检索：腾讯云向量数据库具备高性能的向量存储和检索能力，单索引能够轻松支持10亿级别的向量规模。在…

探析ModaHub魔搭社区中文文本生成图片AI模型的现状、趋势和未来发展方向

目录一、现状分析二、趋势分析三、未来预测 ModaHub魔搭社区是一个专注于AI模型开发和分享的平台，其中文本生成图片AI模型是其中的一个重要领域。本文将通过对ModaHub魔搭社区中文文本生成图片AI模型排行榜的数据分析，来探讨该领域的现状、趋势和未…

ModaHub魔搭社区：向量数据库Milvus性能优化问题（二）

目录为什么有时候小的数据集查询时间反而更长？ 为什么查询时 GPU 一直空闲？ 为什么数据插入后不能马上被搜索到？ 为什么我的 CPU 利用率始终不高？ 创建集合时 index_file_size 如何设置能达到性能最优？ 为什么有…

ModaHub魔搭社区：配置、启动 Prometheus

目录配置、启动 Prometheus 安装 Prometheus 配置、启动 Prometheus 配置 Alertmanager 需要报警的事件配置步骤常见问题配置、启动 Prometheus 本页面介绍如何配置、启用 Prometheus 搜集 Milvus 监控指标，以及如何将 Alertmanager 连接到 Prometheus …

ModaHub魔搭社区：Zilliz Cloud 多组织与角色管理功能，让你的权限管理更简单！

目录组织与角色功能简介如何使用组织与角色功能？ Zilliz Cloud 云服务是一套高效、高度可扩展的向量检索解决方案。近期，我们发布了 Zilliz Cloud 新版本，在 Zilliz Cloud 向量数据库中增添了许多新功能。其中，用户呼声最高的…

ModaHub魔搭社区：安装、启动 Milvus 服务（GPU版）教程

目录安装、启动 Milvus 服务安装前提操作系统硬件软件确认 Docker 状态拉取 Milvus 镜像下载并修改配置文件启动 Milvus Docker 容器常见问题接下来你可以安装、启动 Milvus 服务 CPU 版 Milvus GPU 版 Milvus 安装前提操作系统操作系统版本 Ce…

ModaHub魔搭社区：向量数据库的工作原理

目录 1. 为什么需要向量数据库 1）CPU 工作原理 2）GPU 工作原理 3）二者的差异 4）总结 5）大模型的工作原理学习推理 1. 为什么需要向量数据库向量数据库这一概念随着黄仁勋的演讲火爆了之后，不少…

ModaHub ——向量数据库Milvus特征向量和预写式日志教程

目录特征向量什么是特征向量特征向量的优势应用领域预写式日志数据可靠性缓冲区设置旧日志删除特征向量什么是特征向量向量是具有一定大小和方向的量，可以简单理解为一串数字的集合，就像一行多列的矩阵，比如&#xff1a…

Milvus Cloud扩展变更：为向量数据库注入前沿增强功能

在向量数据库的不断变化中，Milvus Cloud已成为一个改变游戏规则的先锋，革新了我们存储、搜索和分析复杂向量数据的方式。通过最新版本的Milvus Cloud2.3.0，引入了一系列重要的增强和修改，为更强大、更高效的向量数据库解决方案铺平了道路。在本文中，我们将深入探讨Milvus …

《向量数据库指南》——向量数据库Milvus Cloud如何面对市场质疑？

我认为答案是这样：如果你的数据量只有 100 万条或者几十万条，无论使用何种数据库都可以解决这个问题，甚至不用使用向量数据库也可以达到目标。就像为什么要使用 MySQL 一样，如果你只有 100 条数据，可能在 Excel 中进行…

《向量数据库指南》——AIGC 需求的快速变化，催生了Milvus Cloud向量数据库的超高速迭代

对于“版本”成为热度排名第一的关键词，我开始是有点意外的，仔细一想似乎也在情理之中。2023年，是 AIGC 大爆发的一年，LLM 展现出了强大的分析、推理、归纳、总结能力。但是，由于缺乏最新的和特定领域的训练数据，大模型“幻觉”成为困扰 AIGC 开发者的一大难题。随着 RAG…

ModaHub魔搭社区：Milvus 监控指标和使用 Grafana 展示 Milvus 监控指标

目录 Milvus 监控指标 Milvus 性能指标系统运行指标硬件存储指标 Milvus 监控指标 Milvus 会生成关于系统运行状态的详细时序 metrics。你可以通过 Prometheus、Grafana 或任何可视化工具展现以下指标： Milvus 性能指标系统运行指标：CPU/GPU 使用…

ModaHub魔搭社区：如何基于向量数据库+LLM（大语言模型），打造更懂你的企业专属Chatbot？

目录 1、为什么Chatbot需要大语言模型向量数据库? 2、什么是向量数据库? 3、LLM大语言模型ADB-PG:打造企业专属Chatbot 4、ADB-PG:内置向量检索全文检索的一站式企业知识数据库 5、总结 1、为什么Chatbot需要大语言模型向量数据库? 这个春天,最让人震感的科技产品莫过…

ModaHub魔搭社区：向量数据库Milvus部署运维问题教程（一）

目录部署运维问题如果在安装 Milvus 时，从 Docker Hub 拉取镜像总是失败怎么办？ Milvus 只能使用 Docker 部署吗？ 为什么 Milvus 返回 config check error 的错误？ 为什么在导入数据时 Milvus 显示 no space left on devic…

ModaHub 魔搭社区：火山方舟是如何解决大模型互信问题的

火山方舟是一个全面的大模型服务平台，通过整合多个大模型公司的产品，为需要大模型的企业提供联系和选择的机会。它不仅提供相关工具和服务，还构建了大模型"安全互信计算架构"，解决了大模型互信的问题。这个安全互信计算…

ModaHub大禹智库：ModelScope魔搭社区的“下载数据严重造假“的说法可能存在一定的合理性

目录首先，我们需要了解ModelScope魔搭社区的运营模式和数据收集方式。其次，我们需要考虑ModelScope魔搭社区的用户群体和应用场景。此外，我们还需要考虑ModelScope魔搭社区的发展时间和市场竞争情况。综上所述，ModelScope…

ModaHub AI模型开源社区：向量数据库Milvus向量索引是什么？

目录向量索引索引创建机制数据段建索引用户主动创建索引闲时建索引索引概览 FLAT IVF_FLAT IVF_SQ8 IVF_SQ8H IVF_PQ RNSG HNSW ANNOY 选择索引常见问题参考文献向量索引向量索引（vector index）是指通过某种数学模型&#xf…

《向量数据库指南》——Milvus Cloud当初为什么选择向量数据库这个赛道呢？

我们公司专注于向量数据库大约可以追溯到 2018 年左右。当时，向量数据库的概念并不广泛。我们的 CEO 力排众议，认为这个领域有巨大潜力，因为这与我们的愿景高度契合。我们的公司定位是构建一个能够在云上处理非结构化数据的基础设施产品。经过…

《向量数据库指南》——哪些需求推动了如Milvus Cloud等的向量数据库的更新和迭代？

这个问题需要深入讨论大模型与向量数据库之间的关系。从去年 ChatGPT 推出时这个问题就开始引发我们的思考。在当时，我们敏锐地意识到这将是一个机遇。然而，在国内，这个概念的认知需要更长的时间。我个人在去年四五月份的美国之行中注意到，数据库在美国已经是一个非常热门的…