FAISS 第5页

Faiss

1.Faiss是什么 Faiss是FacebookAiResearch开发的一款稠密向量检索工具。

独影月下酌酒·2023-04-19 14:08

Faiss核心技术（二）

在Faiss核心技术一文中我以IndexFlatL2为例解释了Faiss的工作原理。

A君来了·2023-04-10 04:20

极智开发 | ubuntu源码编译faiss

欢迎关注我的公众号[极智视界]，获取我的更多经验分享大家好，我是极智视界，本文介绍一下ubuntu源码编译faiss。

极智视界·2023-04-08 18:10

faiss升级numpy版本惹的祸

最近在进行Facebook的基于faiss语义召回用于电商搜索的召回开发工作时候，基于tensorflow在训练dssm模型的过程中，模型的代码在图的run过程中，出现了莫名其妙的bug,信息如下：TypeErrorTraceback

城中山谷·2023-03-30 01:02

faiss 稠密向量检索框架

faiss是为稠密向量提供高效相似度搜索和聚类的框架，一下是官网提供的demo#1.首先构建训练数据和测试数据importnumpyasnpd=64#dimensionnb=100000#databasesizenq

识醉沉香·2023-03-28 20:19

冰云数据·2023-03-25 23:49

稀疏矩阵计算心得

faiss通过预训练聚类和向量压缩大大减少搜索时的计算量。上亿级别

MakeSense·2023-03-24 16:22

Faiss核心技术

OverviewFaiss是FacebookAIResearch开发的快速相似性搜索（similaritysearch）计算库。所谓的相似性搜索，就是进行向量间比对，如图示，图像经过特征提取转换成一个高维向量，通过将该向量和数据库中其他图像特征向量作一一比对，就能找出最相近的K个目标图像。不仅是图像，只要是可以用高维向量表征的，都可以做相似性搜索，如文字、音频等。similaritysearch向

A君来了·2023-03-15 04:47

零基础入门推荐系统-新闻推荐-【多路召回】

一棵二叉树·2023-02-04 11:19

Windows下装faiss

最近学习YouTubeDNN想用faiss，github上的官方文档是说可以在Windows上装CPU版本的但安装后import总是报错“ImportError:DLLloadfailed:找不到指定的模块

米奇巨型老鼠·2023-02-03 20:56

【python】faiss

0.介绍facebook开发的图像检索框架1.安装condainstall-cpytorchfaiss-cpucondainstall-cpytorchfaiss-gpucudatoolkit=10.2#forCUDA10.2condainstall-cpytorchfaiss-gpucudatoolkit=11.3#forCUDA11.32.应用importnumpyasnpd=64#dimen

.云哲.·2023-02-03 20:55

windows安装Faiss，swigfaiss: 找不到指定的模块

sudoapt-getinstalllibopenblas-devsudoapt-getinstalllibomp-dev以下为windows10下的情况【此部分可以略过，直接看下面的解决方法】问题：在安装Faiss

AlanLiu6·2023-02-03 20:24

CUDA编程（二）

概要源于facebook的faiss库，其用过GPU对于进行加速，另外xfr中也用到GPU，而需求源于之前xid对于大数据量的性能问题。

zhanglehes·2023-01-29 16:11

如何安装faiss-gpu ubutnu18 cuda10.1

使用Anaconda安装faiss是最方便快速的方式，facebook会及时推出faiss的新版本conda安装包，在conda安装时会自行安装所需的libgcc,mkl,numpy模块。

AIchiNiurou·2023-01-29 13:22

anaconda 安装 faiss -gpu

condainstallfaiss-gpu如果用condainstall-cpytorchfaiss-gpu可能会报错

catOneTwo·2023-01-29 13:52

Windows系统下安装faiss-gpu

Anaconda提供了faiss-gpu的安装，可参考github介绍Windows安装faiss-gpu的方式我用的conda-forge生成GPU版本#CPUversion$condainstall-cconda-forgefaiss-cpu

tttlll1234·2023-01-29 13:22

faiss python安装_faiss 安装

https://github.com/facebookresearch/faiss1.安装Python环境如果使

华海亲子鉴定中心·2023-01-29 13:22

解决安装faiss-gpu失败的问题

安装faiss-gpu出现问题：尝试使用：condainstall-cconda-forgefaiss-gpu参考

这个柚子有点酸·2023-01-29 13:51

Windows 使用aconda安装faiss-gpu

condainstall-cpytorchfaiss-gpucudatoolkit=10.0

在下将军·2023-01-29 13:51

pip安装faiss

由于在网上找到的总是conda安装的，但是我不习惯用conda，所以最后还是用pip安装了。0.环境ubuntu16.041.安装cpu版本faisspip--default-time=1000install-ihttps://pypi.tuna.tsinghua.edu.cn/simplefaiss2.安装gpu版本faisspip--default-time=1000install-ihttp

聿默·2023-01-29 13:50

faiss安装pip 修改

贝猫说python·2023-01-29 13:20

pip安装faiss包(gpu版本）

pip--default-time=1000install-ihttps://pypi.tuna.tsinghua.edu.cn/simplefaiss-gpu这里要注意安装faiss包是faiss-gpu

Coder_L2·2023-01-29 13:50

记录python3.6安装faiss包

windows环境下无法安装faiss包，所以我是在linux系统下，docker的镜像容器的centos7系统，python3.6的环境下安装的faiss首先下载faiss包：https://files.pythonhosted.org

AXingSong·2023-01-29 13:50

pip 安装faiss 不能用，使用conda安装并使用faiss成功

pip安装faiss安装过程没有报错，import时候必报错！！！

samoyan·2023-01-29 13:50

[Python] 使用faiss计算相似度

faiss下载及安装。

让我安静会·2023-01-17 09:05

AttributeError: module ‘numpy‘ has no attribute ‘long‘

integer的解决方案应该和这个long的解决方案一样重装numpy，我原先的版本是1.24.1，重装为：1.23.0pipinstallnumpy==1.23.0numpy官网的文档解释但是因为要整合faiss

最上川·2023-01-17 09:28

faiss入门+使用的索引原理

faiss入门+使用的索引原理已经在项目中在离线时，用faiss算过50w视频的相似度。但感觉还是对faiss有些陌生，想对faiss理解更多一些。

波波虾遁地兽·2023-01-14 09:11

FaissPQ索引简介

文章目录1.向量检索问题2.faiss索引类型3.乘积量化3.1向量量化3.2乘积量化3.3空间占用对比3.4faiss中乘积量化的应用3.5超参4.参考资料1.向量检索问题随着神经网络的发展，embedding

转转技术团队·2023-01-14 09:41

【推荐系统】Faiss index选择

术语等介绍见关于Milvus·OpenSourceVectorDatabasedesignedforAIapplicationsFaiss提供了针对不同场景下应用对Index的封装类，这里我们针对Index基类进行说明。我所关心的pointsIndexIVFPQ、IndexIVFFlat支持Gpu；IndexFlatIP（内积距离）支持Gpu；CPU支持并发搜索（batchsearch），GPU不

littlemichelle·2023-01-14 09:39

faiss-4:选择合适的index类型

选择index类型并没有一套精准的法则可以依据，需要根据自己的实际情况选取。下面的几个问题可以作为选取index的参考：是否需要精确的结果如果需要，应选择使用Flat，只有IndexFlatL2能确保返回精确结果。一般将其作为baseline与其他索引方式对比，以便在精度和时间开销之间做权衡。但是Flat方式不支持add_with_ids,如果需要，可以使用IDMap,Flat，支持GPU#导入f

uncle_ll·2023-01-14 09:08

【Faiss】索引选择指南（三）

https://github.com/liqima/faiss_note/blob/master/3.Basics%20%E9%80%89%E6%8B%A9%E5%90%88%E9%80%82%E7%9A

mjiansun·2023-01-14 09:38

Faiss(4)：索引(Index)

在前面的文章中已经有说明，Faiss库的运行是基于索引的，这个索引与传统数据库中的Index不同，它是包含向量集，训练和查询方法等的类。

翔底·2023-01-14 09:37

Faiss(9)：将Index从CPU复制到GPU过程分析

1.说明在前面的文章里提到使用了一个python语言编写的APP，用于测试faiss的search时间，在该程序中train和addIndex的过程都是在CPU中进行的，而search的过程则在GPU中进行

翔底·2023-01-14 09:37

Faiss安装之问题重重

由于某种原因，我需要使用gpu版本的faiss（faiss-gpu），查阅一下资料，好像要先把cpu版本的安装包(faiss-cpu)卸载，于是乎，一顿操作猛如虎，几秒钟就卸载了faiss-cpu，但是

猿气卷心菜少女·2023-01-14 09:07

对Faiss中IndexFlatL2、IndexIVFFlat、IndexIVFPQ三种索引的总结和选择

embedding，在之前的博客里，我尝试了一种方案：https://blog.csdn.net/qysh123/article/details/113754991但是感觉太傻瓜了，听从建议，试了一下Faiss

蛐蛐蛐·2023-01-14 09:07

Faiss(二)基础索引

参考链接：Faiss入门及应用经验记录-知乎Faissindexes·facebookresearch/faissWiki·GitHubFaiss提供了多种索引，本篇介绍一些基础索引。

猿气卷心菜少女·2023-01-14 09:06

向量检索（一）Faiss 在工业界的应用和常见问题解决

一、向量检索的场景传统的搜索，使用关键做精确的查找，利用倒排索引在索引库中搜索。日常在用的百度，Google都属于关键词搜索。在AI时代，我们需要查找一张相似的图片，一个问题的答案，或者根据一段音乐查找对应的歌曲，这些情况下没有准确的关键词用来做检索。这些图片，问题（文本），语音，不再是简单的一个一维量化的数字，而是包含了大量的属性特征。因而不合适使用传统的关键字搜索引擎来查找。对于文本，图片，语

davidullua·2023-01-14 09:02

Faiss(三)索引的选择

从精确度、内存、数据集大小等几个方面考虑选择合适的索引需要精确的结果吗？------IndexFlatL2或者IndexFlatIP如果需要精确的结果，就只能选择IndexFlatL2或者IndexFlatIP，这是保证精确搜索的唯一索引，可以作为其他索引结果的参考基线。它不压缩向量，但也不会增加额外的开销，顺序添加id，不支持add_with_ids，除非使用"IDMapFlat"。该索引不需要

猿气卷心菜少女·2023-01-14 09:27

faiss-gpu的问题

在faiss中使用出现以下问题的：原先的faiss检索方式：dim=768gpu_id=0index=faiss.IndexFlatL2(dim)res=faiss.StandardGpuResources

rucieryi369·2023-01-11 08:37

Windows系统下安装faiss包(ImportError: DLL load failed: 找不到指定的模块)

先是通过更改镜像源安装了faiss包，结果报错ImportError:DLLloadfailed:找不到指定的模块方法：从清华镜像下载相应Python版本的.whl链接如下：https://pypi.tuna.tsinghua.edu.cn

你这个代码我看不懂.·2023-01-09 18:17

PaddleNLP系列课程二：RocketQA、SKEP（属性级情感分析）、通用信息抽取技术UIE

1.2RocketQA1.2.1检索式QAVS预训练时代QA1.2.2RocketQA简介1.3使用RocketQA搭建问答系统1.3.1安装1.3.2使用预置模型完成预测1.3.3搭建问答系统1.3.3.1使用Faiss

神洛华·2023-01-06 07:07

Faiss索引

文章目录前言一、1.Faiss索引构建二、2.Faiss的索引类型2.1精确索引-IndexFlatL2、indexFlatIP2.2倒排快速索引-IndexIVFFlat代码Demo2.3乘积量化索引

商龙人·2023-01-05 13:50

Anaconda中pip install的第三方库在pytorch中无法导入问题的解决办法

这两天在安装pytorch深度学习的einops以及faiss-cpu这两个库时遇到了很大的问题，已知这两个库支持Windows的运行环境，在这里我简要记录解决办法，其实可以总结成为一句话：一定要将

汤姆和佩琦·2023-01-04 23:08

ef参数设置说明（faiss）

1、模型参数：1000代表聚类中心个数随着聚类个数的增加，模型索引的构建时间近似指数增加但搜索精度也线性增加，不影响内存占用，几乎不影响搜索耗时结论：在Faiss引擎的聚类情况下，对于百万级别的数据大概

一条水里的鱼·2023-01-02 11:03

基于BM1684X 架构实现 Faiss 的两个查询接口

文章目录Faiss简介距离度量在SophonTPU上的接口实现SophonTPUindexflat实现indexPQ实现=========================================

算能开发者社区·2022-12-16 16:06

基于SOPHON TPU架构实现 Faiss 的两个查询接口

文章目录1.Faiss简介2.距离度量3.在SophonTPU上的接口实现3.1SophonTPU3.2indexflat实现3.3indexPQ实现==========================