hashing

【Spark】Spark的机器学习算法库——Spark MLilb

SparkSession对象引入要包含的包构建训练数据集定义Pipeline中的各个工作流阶段PipelineStage创建一个Pipeline构建测试数据预测3特征抽取、转化和选择3.1.特征抽取TF-IDF(HashingTFandIDF
快乐的冲浪码农·2023-01-14 08:31

局部敏感哈希（LSH）

一.近邻搜索局部敏感哈希，英文locality-sensetivehashing，常简称为LSH。局部敏感哈希在部分中文文献中也会被称做位置敏感哈希。
越前浩波·2023-01-12 18:21

LSH局部敏感哈希

1.简介局部敏感哈希(LocalitySensitiveHashing,LSH)主要是为了处理高维度数据的查询和匹配等操作。
zhurui_xiaozhuzaizai·2023-01-12 17:50

【期外】 （一）关于LSH ：局部敏感哈希算法

LSH是我同学的名字，平时我会亲切的称呼他为离骚，老师好，左移（leftshift），小骚骚之类的，最近他又多了一个新的外号：局部敏感哈希（Locallysensitivehashing)。
weixin_30408309·2023-01-12 17:50

【转载】局部敏感哈希算法(Locality Sensitive Hashing)

局部敏感哈希算法(LocalitySensitiveHashing)转载这个博客呢，是因为学习ICLR2020年的文章：Reformer:TheEfficientTransformer。
Phoenixtree_DongZhao·2023-01-12 17:19

局部敏感哈希(LSH)：高维数据下的最近邻查找

哈希算法是要避免碰撞冲突，而局部敏感哈希(Locality-SensitiveHashing,下面我们简称LSH)则相反，是要创造更多的碰撞冲突。局部敏感哈
我就算饿死也不做程序员·2023-01-12 17:18

其他算法-LSH局部敏感度哈希

目录LSH简介LSH算法过程LSH简介LSH全称LocalitySensitiveHashing，即局部敏感度哈希，是一种常用的数据挖掘算法，LSH让海量且高维的数据检索变得高效；普通哈希的目标是避开碰撞
tzc_fly·2023-01-12 17:47

【算法】局部敏感哈希 LSH 的 Python 实现

哈希算法是要避免碰撞冲突，而局部敏感哈希(Locality-SensitiveHashing,下面我们简称LSH)则相反，是要创造更多的碰撞冲突。二、局部敏感哈希在很多领域中，经常会使用最
CC‘s World·2023-01-12 17:46

LSH(局部敏感哈希)算法（一）：SimHash算法

本文主要介绍海量item之间相似度计算问题——局部敏感哈希(Locality-SensitiveHashing,
u013250861·2023-01-12 17:41

如何使用局部敏感哈希(LSH)算法进行特征降维?

1.局部敏感哈希算法1.1算法简介  传统的哈希(Hashing)算法通过映射函数将记录的存储位置与记录的关键字关联起来，实现记录的快速查找。
Sun_Sherry·2023-01-04 14:57

局部敏感哈希LSH（Locality-Sensitive Hashing）——海量数据相似性查找技术

一、前言    最近在工作中需要对海量数据进行相似性查找，即对微博全量用户进行关注相似度计算，计算得到每个用户关注相似度最高的TOP-N个用户，首先想到的是利用简单的协同过滤，先定义相似性度量（cos，Pearson,Jaccard），然后利用通过两两计算相似度，计算top-n进行筛选，这种方法的时间复杂度为$O(n^2)$（对于每个用户，都和其他任意一个用户进行了比较）但是在实际应用中，对于亿级
飞剑客阿飞·2023-01-04 14:22

机器学习之局部敏感哈希(Locality-Sensitive Hashing, LSH)

局部敏感哈希(Locality-SensitiveHashing,LSH)方法介绍本文主要介绍一种用于海量高维数据的近似最近邻快速查找技术——局部敏感哈希(Locality-SensitiveHashing
等待破茧·2023-01-04 14:22

【PAT（甲级）】1078 Hashing

Thetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtable,andoutputthepositionsoftheinputnumbers.ThehashfunctionisdefinedtobeH(key)=key%TSizewhereTSizeisthemaximumsizeoftheh
猪脑不过载·2023-01-01 07:04

2018ECCV：Attention-Aware Deep Adversarial Hashing for Cross-Modal Retrieval 论文笔记

0.摘要由于多模态数据的快速增长，跨模态检索的哈希方法受到了广泛的关注。然而，由于存在异质性差异，在不同数据模式之间寻找内容相似性仍然具有挑战性。为了进一步解决这个问题，我们提出了一个带有注意机制的对抗性哈希网络，通过选择性地关注多模态数据的信息部分，来增强内容相似性的测量。提出的新的深层对抗网络包括三个构建模块:(1)特征学习模块获取特征表征;(2)用于生成注意掩码的注意模块，该注意掩码用于将特
彦祖琦·2022-12-26 14:48

RS推荐系统-DSSM双塔模型

原论文针对英文输入提出了一种叫做Wordhashing的特殊embedding方法来降低字典规模。表示层表示层
Vihagle·2022-12-14 13:28

LR判断垃圾邮件spark代码

1、垃圾邮件分类，使用Spark-MLlib中的两个函数：1）HashingTF：从文本数据构建词频（termfrequency）特征向量2）LogisticRegressionWithSGD：使用随机梯度下降法
MONKEYMOMO·2022-12-08 09:46

【分类特征编码】11种分类特征编码方法

目录1.ONEHOTENCODING2.LabelEncoding3.LabelBinarizer4.LeaveoneoutEncoding5.Hashing6.WeightofEvidenceEncoding7
allein_STR·2022-12-07 13:44

java token 超时_双token实现token超时策略示例

importcom.google.common.base.Charsets;importcom.google.common.hash.Hashing;importjava.util.Date;importorg.apache.commons.lang.time.FastDateFormat
一路的欢乐长久mk~·2022-12-07 09:32

哈希检索方面的论文、代码和数据集Learning to Hash Paper, Code and Dataset

CodeandDatasetTableofContentIntroductionTutorialSlidesData-IndependentMethodLearningtoHashMethod(Data-DependentMethod)UnsupervisedHashingSupervisedHashingRanking-BasedHashingMulti
GarfieldEr007·2022-12-02 23:00

Accelerating Large Scale Centroid-BasedClustering with Locality Sensitive Hashing

AcceleratingLargeScaleCentroid-BasedClusteringwithLocalitySensitiveHashing大多数传统的数据挖掘算法难以高效地处理海量数据。
西西弗的小蚂蚁·2022-11-29 21:55

【Spark MLlib】（二）Spark MLlib 特征工程 - 提取、转换和选择

Extraction)：从“原始”数据中提取特征转换(Transformation)：缩放，转换或修改特征选择(Selection)：从较大的一组特征中选择一个子集局部敏感哈希(LocalitySensitiveHashing
云 祁·2022-11-29 11:08

BATCH: A Scalable Asymmetric DiscreteCross-Modal Hashing--文献翻译

论文下载：BATCH:AScalableAsymmetricDiscreteCross-ModalHashing|IEEEJournals&Magazine|IEEEXplore摘要:有监督的跨模态散列引起了很多关注
MT_Joy·2022-11-29 03:49

向量化方式优化Bihash searching研究报告

摘抄一段来自VPP官网的描述：Vppusesbounded-indexextensiblehashingtosolveavarietyofexact-match(key,value)lookupproble
weixin_37097605·2022-11-28 22:03

Pyspark特征工程--IDF

IDFModel采用特征向量(通常由HashingTF或CountVectorize
Gadaite·2022-11-28 11:09

浅谈keras.preprocessing.text

目录一、主要API二、探究hashing_trick三、python的hash()函数1、关于hash()函数2、关于hash冲突四、关于EmbeddingKeras是一个用python编写的开源神经网络库
此何人哉tan·2022-11-28 08:39

常用类别变量编码方式总结

StaticCategoricalVariables1.OrdinalEncoding序列编码2.One-hotEncoding独热编码3.TargetEncoding目标编码4.HashingEncoding
Sais_Z·2022-11-27 06:54

【最新汇总】单细胞转录组分析与绘图系列

分析单细胞分析实录(1):认识CellHashing单细胞分析实录(2):使用CellRanger得到表达矩阵单细胞分析实录(3):CellHashing数据拆分单细胞分析实录(4):doublet检测单细胞分析实录
R语言学堂·2022-11-25 14:13

Spark 3.0 - 4.Pipeline 管道的工作流程

Pipeline-Estimator2.预测Pipeline-Transformer四.Pipeline分解与构造1.DataFrame2.Transformer1-Tokenizer3.Transformer2-HashingTF4
BIT_666·2022-11-24 06:42

Spark 3.0 - 5.ML Pipeline 实战之电影影评情感分析

.训练集、测试集划分三.Stage-2-Comment分词1.Tokenizer‍♀️2.JieBa分词‍♀️2.1Jieba分词示例2.2自定义Jieba分词Transformer四.Stage-3HashingTF
BIT_666·2022-11-24 06:40

单细胞分析实录(7): 差异表达分析/细胞类型注释

前面已经讲解了：单细胞分析实录(1):认识CellHashing单细胞分析实录(2):使用CellRanger得到表达矩阵单细胞分析实录(3):CellHashing数据拆分单细胞分析实录(4):doublet
TOP生物信息·2022-11-21 07:53

召回模型：DSSM双塔模型

文章目录DSSM(2013)DNNforComputingSemanticFeaturesWordHashingYoutube双塔模型(2019)ModelingFrameworkStreamingFrequencyEstimationNeuralRetrievalSystemforYoutubeDSSM
竹枝子·2022-11-20 14:35

Python scikit-learn特征提取讲解

sklearn.feature_extraction是scikit-learn特征提取的模块本文分别总结以下内容：Onehot编码DictVectorizer使用CountVectorizer使用TfidfVectorizer使用HashingVectorizer
赵五十·2022-11-20 09:59

[CPE 2021] Differentially private locality sensitive hashing based federated recommender system

基于差分隐私局部敏感哈希的联邦推荐系统DifferentiallyprivatelocalitysensitivehashingbasedfederatedrecommendersystemWileyOnlineLibraryConcurrencyandComputation
sinat_38007523·2022-11-19 04:07

数据结构之哈希链表Hashtable

散列（Hashing）在现实中经常遇到按照给定的值进行查询的实例。在软件开发过程记录存放的位置和用于表示他的数据项直接的对应关系。这种数据结构记录了数据和数据位置的信息，这就是Hashing。
Rocketcp3·2022-11-11 10:02

Mit6.006-lecture04-Hashing

一、回顾数据结构操作，最坏情形O容器（container）静态（static）动态（dynamic）顺序（order）build(X)find(k)insert(x)delete(k)find_min()find_max()find_prev(k)find_next(k)数组nnnnn有序数组nlognlognn1logn想要更快的查找以及动态操作。我们能让find(k)比θ(logn)\thet
解析Ta·2022-11-10 15:59

vue-cli4版本如何快速优化性能

注意事项：1、vue-cli4版本测试环境无法打包出带有hash值的文件名，解决方法：即便设置filenameHashing:true,也是无效的，vue-cli4版本是认准NODE_ENV='production
·2022-10-30 23:40

GCNH：Graph Convolutional Network Hashing 阅读笔记

GCNH：GraphConvolutionalNetworkHashing阅读笔记摘要：最近，基于图的通过亲和力图学习保持相似性的二进制码的哈希算法在大规模图像检索中得到了广泛的研究。
低调流年的微凉·2022-10-18 07:02

数据预处理：离散特征编码方法

文章目录数据预处理：离散特征编码方法无监督方法：1.序号编码OrdinalEncoder2.独热编码OneHotEncoder3.二进制编码BinaryEncoder4.计数编码CountEncoder5.哈希编码HashingEncoder6
快乐小码农·2022-10-03 15:17

PAT1145 Hashing - Average Search Time

本题是pat1078hashing的变种题，题目意思很绕，而且描述的不是很清楚，做的时候遇到了很多的问题解题步骤：1.对于输入的msize（hashtable表长），如果不是素数的话，需要求出比msize
哦啦哦啦！·2022-09-07 20:31

PAT1145 Hashing - Average Search Time（hash—平方探测法）

题意：给定一个序列，用平方探测法解决哈希冲突，然后给出m个数字，如果这个数字不能够被插入就输出”Xcannotbeinserted.”，然后输出这m个数字的平均查找时间思路：抽空整套做了一下寒假最新的这套题，感觉还行，大概一个半小时能写完，但是这题就卡住了，前面也出现过这种问题，主要问题在于我数据结构里学的平方探测法定义就不一样，PAT里递推公式为Hi=(key+di)%m，其中key是不随碰撞变
weixin_34368949·2022-09-07 20:59

PAT 1145 1078| hashing哈希表 平方探测法

pat1145:参考链接Quadraticprobing(withpositiveincrementsonly)isusedtosolvethecollisions.：平方探测法解决冲突哈希表:H(key)求余数、二次平方探测法解决冲突、求平均查找长度AVL=所有次数和/n需要注意点：处理冲突统计查找次数时，如果查找到哈希表最后一个也失败了，那么次数要+1.#includeusingnamespa
weixin_30838921·2022-09-07 20:58

PAT 1145 Hashing - Average Search Time [hash][难]

1145Hashing-AverageSearchTime（25分）Thetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtablefirst.Thentrytofindanothersequenceofintegerkeysfromthetableandoutputtheaveragesear
weixin_30918633·2022-09-07 20:28

Hashing - Average Search Time（25 分）

时间限制:200ms内存限制:64MB代码长度限制:16KBThetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtablefirst.Thentrytofindanothersequenceofintegerkeysfromthetableandoutputtheaveragesearchti
WTlumos·2022-09-07 20:26

PAT 1145 Hashing - Average Search Time （25 分）

PAT1145Hashing-AverageSearchTime（25分）Thetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtablefirst.Thentrytofindanothersequenceofintegerkeysfromthetableandoutputtheaverages
凌凌岛·2022-09-07 20:48

PAT 1145 Hashing - Average Search Time

1145Hashing-AverageSearchTime(25分)Thetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtablefirst.Thentrytofindanothersequenceofintegerkeysfromthetableandoutputtheaveragesear
luer9·2022-09-07 20:16

PAT 1145 Hashing - Average Search Time

原题连接：1145Hashing-AverageSearchTime(25分)参考的柳神博客：1145.Hashing–AverageSearchTime(25)–甲级题目：Thetaskofthisproblemissimple
cwtnice·2022-09-07 20:39

Hashing - Average Search Time (25)

问题描述：1145.Hashing-AverageSearchTime(25)时间限制200ms内存限制65536kB代码长度限制16000B判题程序Standard作者CHEN,YueThetaskofthisproblemissimple
kircher·2022-09-07 20:38

甲级PAT 1145 Hashing - Average Search Time （25 分）(hash,二次方探测）

1145Hashing-AverageSearchTime（25分）Thetaskofthisproblemissimple:insertasequenceofdistinctpositiveintegersintoahashtablefirst.Thentrytofindanothersequenceofintegerkeysfromthetableandoutputtheaveragesear
Joyceyang_999·2022-09-07 20:00

各种集合类型底层实现原理

①HashMap的工作原理HashMap基于hashing原理，我们通过put()和get()方法储存和获取对象。
ditong7882·2022-09-01 22:34

区块链100讲：据说，80%的人都搞不懂哈希算法

前面的《区块链100讲》介绍了区块链、算力、挖矿等，几乎每一讲都会提到一个词哈希(Hashing)。聊到区块链的时候也少不了会听到“哈希”、“哈希函数”、“哈希算法”，是不是听得一头雾水？
csid_502·2022-07-20 00:01
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他