ZILLIZ

Reinvent Data Science

原创 Milvus加入LF AI孵化,立志成为最流行的AI数据平台

Milvus 特征向量相似度搜索引擎通过技术委员会投票,正式加入 LinuxAI (LF AI)基金会成为其最新的孵化项目。LF AI 基金会的使命是建立和支持开放的人工智能社区,通...

2020-04-03 09:44:10

阅读数 98

评论数 0

原创 Milvus带你实现轻松搭建以图搜图系统

当您听到“以图搜图”时,是否首先想到了百度、Google 等搜索引擎的以图搜图功能呢?事实上,您完全可以搭建一个属于自己的以图搜图系统:自己建立图片库;自己选择一张图片到库中进行搜索,并...

2020-02-15 18:42:13

阅读数 2218

评论数 0

原创 Milvus v0.7.1 发布:多并发下的性能大幅提升!

|版本兼容 |新增功能 针对 FLAT 索引类型,新增子结构(substructure)和超结构(superstructure)距离计算方式。这两种距离计算方式常用于化学分子式的子结构和超结构搜索。 https://github.com/milvus-io/milvus/issues...

2020-04-02 14:12:40

阅读数 111

评论数 0

原创 Happy 2nd Birthday LF AI!

​ (图片来源:LF AI 官网) 2018年3月 Linux 基金会旗下的子...

2020-04-02 14:02:55

阅读数 82

评论数 0

原创 Milvus 如何实现数据动态更新与查询

在这篇文章,我们会主要描述 Milvus 里向量数据是如何被记录在内存中,以及这些记录以怎样的形式维护。我们的设计目标主要有下面三点:数据导入效率要高数据导入后尽快可见避免数据文件碎片...

2020-04-01 09:44:52

阅读数 123

评论数 2

原创 Chat with Milvus #5 回顾- 本期内容: Milvus 最佳性能、以图搜设备、文档搜索

‍‍Chat with Milvus 线上问答来到了第5期,本期讨论了不少内容, 建议大家影音/文字可以互相搭配。跃跃欲试想来和大家分享你对 Milv...

2020-03-26 12:52:48

阅读数 171

评论数 0

原创 Arctern 社区周报- Week 12, 2020

​ 周报日期:2020.03.16 - 2020.03.22 |研发进展 创建 Arctern-tutorial,添加 render example(gis example 暂未添加) 接入 spark profiling 系统 接入 spark log ...

2020-03-25 17:27:12

阅读数 127

评论数 0

原创 Milvus 社区周报- Week 12, 2020

|研发进展 Milvus 0.8.0正式启动,版本的主要目标是让更多索引支持删除功能 为解决0.7.0用户方反馈的各种问题和 QPS 问题,会在0.8.0发布前,出个0.7.1版本 重构 Milvus 日志信息格式 混合查询的原型开发 对 Annoy ...

2020-03-25 17:23:24

阅读数 142

评论数 0

原创 异构计算系列(二):机器学习领域涌现的异构加速技术

“异构计算”(Heterogeneous computing),是指在系统中使用不同体系结构的处理器的联合计算方式。在 AI 领域,常见的处理器包括:CPU(X86,Arm,RISC-V 等),GPU,FPGA 和 ASIC。(按照通用性从高到低排序)本文是 异构计算系列 的第二篇文章,重点介绍机...

2020-03-23 12:34:49

阅读数 233

评论数 0

原创 视频教学| 轻松三步搭建 Milvus 以图搜图系统

【戴口罩特别版】Milvus 手把手教你搭建以图搜图系统 响应众多朋友对以图搜图技术的热情, 本周三我们推出了 Milvus 第一期线上直播。用Milvus 以图搜图真的很简单, 别说我骗你, 我们有以上影片为证 |三步轻松上手 Milvus 第一步:打开视频 第二步:跟着视频操...

2020-03-20 11:13:04

阅读数 180

评论数 0

原创 Chat with Milvus #4 回顾 - v0.7.0 的那些事儿

新版本 v0.7.0 的一些主要更新来看看大家都在这次的问答会上问了什么问题!不播放视频也可以看看以下的文字实录喔!|部分Q&A文字实录* ...

2020-03-20 10:42:49

阅读数 138

评论数 0

原创 Arctern 社区周报- Week 11, 2020

周报日期: 2020.03.09 - 2020.03.15 |研发进展 增加以 dataframe 为接口的 Python API。 简化 Render API,提高封装性,进行中。 接入 Spark profiling 系统,进行中。 完成中英文 README 第一版。 完成中英...

2020-03-18 10:59:47

阅读数 111

评论数 0

原创 Milvus 社区周报- Week 11, 2020

周报日期: 2020.03.09 - 2020.03.15 |研发进展 Milvus 0.7.0 版本:各主要测试全部通过,已于3月11日正式发布 Milvus 0.8.0 正式启动:版本的主要目标是让更多索引支持删除功能 为解决0.7.0用户方反馈的各种问题和 QPS 问题,会在0....

2020-03-18 10:54:42

阅读数 109

评论数 0

原创 异构计算系列文章(一):定义、场景及局限性

作者 | 顾钧 2020 开年,ZILLIZ 与 InfoQ 筹备了以异构计算为专题的一系列文章。此篇文章作为异构计算专题的开篇,整体性的介绍了异构计算的定义、场景与局限性。在后续的专题文章中,我们将深入不同的 AI 应用场景进一步解释异构计算的优势。 诞生伊始,计算机处理能力就处于高速发...

2020-03-16 15:09:29

阅读数 165

评论数 0

原创 Milvus v0.7.0 新鲜出炉!功能更多、操作更简易、兼容更全!

发布时间:2020-3-10 |版本兼容 ​ |新增功能 向量删除 新增了对单条或多条向量的删除功能。如果您对一个集合进行了向量删除操作,后续对这个集合的搜索操作仅支持一部分索引类型,包括在CPU上运行的 Flat、IVFlat、IVFSQ8 等。Milvus 的后续版本将为其...

2020-03-13 10:29:02

阅读数 543

评论数 0

原创 Chat with Milvus #3 回顾 - ANN-Benchmarks 测试结果

在高维空间中快速进行最近邻搜索已成为一个越来越重要的问题,但是到目前为止,市面上还没有很多客观的比较基准,因此 Erik Bernhardsson 创建...

2020-03-12 09:24:58

阅读数 153

评论数 0

原创 Milvus 分布式向量检索-Mishards架构介绍

向量搜索引擎 Milvus 旨在帮助用户实现海量非结构化数据的近似检索和分析。单个 Milvus 实例可处理十亿级数据规模,而对于百亿或者千亿规模数据的需求,则需要一个 Milvus 集...

2020-03-11 10:00:16

阅读数 204

评论数 0

原创 Arctern 社区周报- Week 9, 2020

周报日期: 2020.02.24 - 2020.03.01​ |研发进展 ​确定 PostGIS 作为功能测试基准,已完成 SQL 执行脚本及 PostGIS/Arctern 结果对比脚本。进行 GeoSpark 、 PostGIS 测试案例向 Arctern 移植,已整理完成 400 多...

2020-03-05 13:50:44

阅读数 178

评论数 0

原创 Chat with Milvus No.2 活动回顾

Hello~ Milvus 的朋友们, 想找个机会与 Milvus 团队和其他的用户一起交流吗?之后我们每周二晚上8点固定与你线上面基,聊聊近似搜索????的那些话题!快来与 ZILLIZ 小助手(zilliz-tech)报名下周二的活动吧! 点击链接????了解新版本0.7.0有哪些新功能:h...

2020-03-05 13:42:33

阅读数 166

评论数 0

原创 Milvus 查询任务调度原理

本文主要阐述在单机多卡的场景下,Milvus 是如何调度查询任务的。此外,我们还将讨论在调度实现过程中遇到的问题,解决方案和未来的发展方向。|背景前文大规模向量检索场景下的数据管理(...

2020-03-02 10:30:35

阅读数 179

评论数 0

原创 MegaWise技术初探:面向异构计算的查询优化与编译

近两年,我们团队在研发基于异构计算的新型 OLAP 数据库系统-- MegaWise,这是一个处于“异构计算”与“大数据分析”交叉领域的工作。当前该系统已经完成0.5.0版,希望借此文介绍我们现有的一些技术探索。1.为什么要在“异构计算”与“大数据分析”上面做工作 我想以一个真实的案例展开今天的内...

2020-02-29 15:55:24

阅读数 291

评论数 0

原创 Chat with Milvus (1) 问答实录 - 近似搜索、分布式、数据库, 来看看我们都聊了些什么!...

本周二我们在线上与 Milvus 的朋友们进行了一场精彩的问答。我们也为不能参加的朋友们做了一个完整的文字实录。觉得字数多看起来很累的朋友们可以根据自己想了解的内容观看影片回放。也想加入...

2020-02-28 10:42:51

阅读数 196

评论数 0

原创 Milvus 最佳实践之如何设置API参数 (3)

在上文《Milvus 最佳实践之如何设置系统配置项 (2)》中,针对Milvus 0.6.0版本的关键系统配置项给予了详细说明。本文针对Milvus 0.6.0版本的API...

2020-02-26 10:33:23

阅读数 198

评论数 0

原创 Milvus 社区周报- Week 8, 2020

测试目标WAL 功能测试已经通过,稳定性测试和性能测试进行中向量删除/Flush/GetVectorByID/GetTableInfo/Compact,功能测试/稳定性测试/性能测试中H...

2020-02-25 12:51:16

阅读数 164

评论数 0

原创 Milvus 最佳实践之如何设置系统配置项 (2)

Milvus 最佳实践之如何选择索引类型 在上文《Milvus 最佳实践之如何选择索...

2020-02-19 14:16:25

阅读数 177

评论数 0

原创 Milvus实战 | 基于Mishards的分布式集群方案

​Milvus 作为一款针对海量特征向量的相似性搜索引擎,在单台服务器上就可以处理十亿级数据规模。而对于百亿或者千亿级数据,则需要具有水平扩展能力的 Milvus 集群来满足对海量向量数据的高性能检索需求。 Mishards 是一个用 Python 开发的 Milvus 集群中间件。使用 Mis...

2020-02-17 10:57:16

阅读数 284

评论数 0

原创 Milvus 加速新药研发- 化合物虚拟筛选的实现

​面对类似 2019-nCOV(新型冠状病毒)这样快速传播的疾病, AI 如何能帮助药物专家加速新药研发、降低疫情的影响?这裡我们以 Milvus 为例,希望能为药物发现的问题,提供一个解决的工具。 药物发现 (Drug discovery) 是新药创新的源头,在新药研发中具有举足轻重的地位。药...

2020-02-17 10:49:23

阅读数 277

评论数 0

原创 Milvus 实战 | 基于分区表实现结构化数据与非结构化数据的混合查询

通过深度学习的神经网络模型,可以将图片、视频、语音、还有文本等非结构化数据转换为特征向量。除了结构化的向量,这些数据往往也需添加其他属性。如人脸图片,可以添加性别、是否戴眼镜、图片抓取时...

2020-02-07 09:00:00

阅读数 223

评论数 0

原创 Milvus 揭秘| 向量索引算法HNSW和NSG的比较

随着机器学习、深度神经网络的不断发展,数据的向量化无处不在。而针对海量向量数据的搜索,无论是工业界还是学术界都做了大量的研究。本文主要讲解两个基于近邻图的向量搜索算法,并比较其适用场景。...

2020-01-16 09:26:30

阅读数 451

评论数 0

原创 开源| 用PaddlePaddle & Milvus 轻松搭建个性化推荐系统

背景介绍在网络技术不断发展和电子商务规模不断扩大的背景下,商品数量和种类快速增长,用户需要花费大量时间才能找到自己想买的商品,这就产生了信息过载问题。为了解决这个问题,个性化推荐系统(R...

2019-12-27 09:41:25

阅读数 364

评论数 0

原创 Milvus实战 | 基于Keepalived的高可用方案

Milvus 与 KeepalivedMilvus 作为一款性能领先、易学易用的向量搜索引擎,项目开源以来受到广泛关注,数百名开发者加入了 Milvus 社区开始测试、使用,贡献文档、代...

2019-12-19 09:00:00

阅读数 236

评论数 0

原创 Milvus v0.6.0 新功能介绍

**版本兼容**| Milvus 版本 | pymilvus 版本 | Java SDK 版本 || ----------- | ------------- | ------------...

2019-12-10 15:49:41

阅读数 374

评论数 5

原创 Milvus 最佳实践之如何选择索引类型

在Milvus 0.5.3版本中,支持的索引类型包括如下几种:FLATIVFFLATIVFSQ8IVFSQ8H在不同的应用场景下该如何选择一种合适的索引并非那么地显而易见,需要在资源使用...

2019-12-09 11:07:07

阅读数 341

评论数 0

原创 Milvus 0.6.0新增功能:分区表

一、什么是分区?经常使用数据库的人应该都了解,随着单张表的数据量不断增长,查询性能也会不断下降。单张表的数据变得很臃肿的时候,就要考虑将这张表拆分。第一种做法是手工分表,比如某条经常使用...

2019-11-29 09:00:00

阅读数 294

评论数 8

原创 Milvus在云从的深度实践

Milvus作为一个开源的分布式向量搜索引擎,凭借其出色的产品设计和工程实现,已被多家不同行业的科技公司融合进各种行业解决方案中。云从科技,作为世界领先的AI科技独角兽公...

2019-11-27 09:00:00

阅读数 386

评论数 0

原创 Milvus中ivfsq8索引测试报告

本文描述了ivfsq8索引在Milvus单机部署方式下的测试结果。测试目标参数不同情况下的查询时间和召回率。测试方法????软硬件环境操作系统:CentOS Linux rel...

2019-11-20 09:00:00

阅读数 271

评论数 2

原创 大规模向量检索场景下的数据管理(下篇)

错过上篇的同学可以点击标题回顾三、Milvus 是什么?Milvus 是 一款开源的、针对海量特征向量的相似性搜索引擎。Milvus能够很好地应对海量向量数据,它集成了目...

2019-11-19 09:00:00

阅读数 348

评论数 1

原创 Milvus v0.5.3 版本发布说明

开源向量相似度搜索引擎 Milvus 自开源以来获得开发者们的高度关注,不少开发者给我们提了很多宝贵意见和建议,在此 0.5.3 版本更新之际,欢迎大家给 Milvus ...

2019-11-15 09:00:00

阅读数 217

评论数 0

原创 ZILLIZ携手NVIDIA,参展2019中国移动全球合作伙伴大会

随着5G商用牌照的发放,5G网络的快速部署,5G多款商用终端的不断推出,未来已来,5G就在眼前!为迎接5G时代的到来,继成功举办6届全球合作伙伴大会之后,中国移动通信集团...

2019-11-12 18:00:00

阅读数 178

评论数 0

原创 我们把全球领先的向量搜索引擎 Milvus 开源了

Milvus 高性能向量搜索引擎已经开源了。GitHub Repo:https://github.com/milvus-io/milvus(或点击阅读原文查看)。Mil...

2019-11-05 10:13:33

阅读数 1304

评论数 0

提示
确定要删除当前文章?
取消 删除