使用参考：https://zhuanlan.zhihu.com/p/31139113 例程： def get_data_iter(train_csv, test_csv, fix_length, batch_size, word2vec_dir): TEXT = data.Field(sequent ...
分类：
其他好文 时间：
2020-04-02 18:23:04
阅读次数：
90
开篇： 从事NLP方向的工作也有一年了，前前后后也学到了很多东西，但是就是没有整理过，现在从原理和应用的方面将所有知识总结方便复习管理。 一、word2vec word2vec可以说得上是NLP的一个里程碑。将每个单词离散表示，既解决了one-hot的巨大维度，也解决了one-hot的部分语义问题。 ...
分类：
其他好文 时间：
2020-03-30 23:45:00
阅读次数：
180
CVPR2020论文解析：视频分类Video Classification Rethinking Zero-shot Video Classification: End-to-end Training for Realistic Applications 论文链接：https://arxiv.org ...
分类：
其他好文 时间：
2020-03-21 13:19:41
阅读次数：
709
一、今天完成了行业代码匹配，还有数据没有展示 二、文本匹配，添加行业代码。 设计思路：首先，我们需要将完全相同的行业代码进行匹配，其次将相似的行业代码进行文本相似匹配，选取符合要求的前面几个行业，追加行业代码。 判断完全相同的部分就不解释了，主要解释如何使用word2vec模式进行文本相似的匹配。 ...
分类：
其他好文 时间：
2020-03-14 01:14:26
阅读次数：
41
介绍 在该节中我们将对用户产生的真实评论数据进行情绪分析。 知识点 文本分词 Word2Vec 方法 决策树分类 本文所涉及到情绪分析，又称为文本情绪分析，这是自然语言处理和文本挖掘过程中涉及到的一块内容。简而言之，我们通过算法去判断一段文本、评论的情绪偏向，从而快速地了解表达这段文本的原作者的主观 ...
分类：
编程语言 时间：
2020-03-06 12:54:09
阅读次数：
83
python中常用的分析文档、计算词语相似度的包 —— Word2Vec函数；该函数在gensim.models.Word2Vec包内。 分析文本和计算相似度有几个步骤： 导入需要用到的库： # 导入第三包 import jieba import pandas as pd import gensim ...
分类：
其他好文 时间：
2020-02-22 16:05:44
阅读次数：
135
词嵌入预训练模型Glove "1.词嵌入预训练模型" "2.Glove" "3.求近义词和类比词" 1.文本嵌入预训练模型 虽然 Word2Vec 已经能够成功地将离散的单词转换为连续的词向量，并能一定程度上地保存词与词之间的近似关系，但 Word2Vec 模型仍不是完美的，它还可以被进一步地改进： ...
分类：
其他好文 时间：
2020-02-21 22:02:37
阅读次数：
390
Word2vec "1.词嵌入基础" "2.PTB数据集" "3.Skip Gram" "4.负采样近似" "5.训练模型" 1.词嵌入基础 使用 one hot 向量表示单词，虽然它们构造起来很容易，但通常并不是一个好选择。一个主要的原因是，one hot 词向量无法准确表达不同词之间的相似度，如 ...
分类：
其他好文 时间：
2020-02-21 20:22:27
阅读次数：
140
1. 比赛信息 比赛地址： "阿里云恶意程序检测新人赛" 比赛介绍：使用自然语言处理的方法对恶意程序的行为（API调用序列）进行分析，实现对恶意程序鉴别及分类。 2. 我的主要工作 1）数据预处理：格式转换csv txt pkl，根据fileid分组数据，排序后生成api序列，用于训练； 2）数据分 ...
分类：
其他好文 时间：
2020-02-20 13:37:04
阅读次数：
76
Word2vec，是一群用来产生词向量的相关模型。这些模型为浅而双层的神经网络，用来训练以重新建构语言学之词文本。网络以词表现，并且需猜测相邻位置的输入词，在word2vec中词袋模型假设下，词的顺序是不重要的。训练完成之后，word2vec模型可用来映射每个词到一个向量，可用来表示词对词之间的关系 ...
分类：
其他好文 时间：
2020-02-18 14:49:26
阅读次数：
52
