自然语言处理是一门用于理解人类语言、情感和思想的技术,被称为是人工智能皇冠上的明珠。 随着深度学习发展,自然语言处理技术近年来发展迅速,在技术上表现为BERT、GPT等表现极佳的模型;在应用中表现为chatbot、知识图谱、舆情监控等基于NLP技术的产品在市场上的大规模出现。 基于此,各类公司开始出 ...
分类:
编程语言 时间:
2020-05-24 20:59:23
阅读次数:
87
很多都用了NLP技术,许多计算研究领域都在研究计算机和人类语言之间的相互作用。它主要关注计算机如何准确、快速地处理大量自然语言语料库。什么是自然语言语料库?它是用现实世界的语言表达的语言学习,是从文本和语言与另一种语言的关系中理解一组抽象规则的综合方法。 ...
分类:
编程语言 时间:
2020-05-24 09:18:50
阅读次数:
73
处理excel表格 openpyxl,csvkit NLP领域(人工智能) 自然语言 NLTK[业内使用较频繁],jieba,SnowNLP HTTP requests – 人性化的HTTP请求库。 grequests – requests 库 + gevent ,用于异步 HTTP 请求. [比r ...
分类:
其他好文 时间:
2020-05-23 11:27:04
阅读次数:
64
原文链接:https://amitness.com/2020/05/data augmentation for nlp/ 译文链接:https://blog.csdn.net/u011984148/article/details/106233312/ semantically invariant t ...
分类:
其他好文 时间:
2020-05-23 11:14:47
阅读次数:
309
1. MySQL连接数查询 2. 依据PID查询进程相关信息 3. 依据进程名查询相关信息 4. 根据端口查询进程信息 ...
分类:
其他好文 时间:
2020-05-22 21:25:55
阅读次数:
77
前几天小编写了两篇利用Python "采集网易云歌词" 和 "采集网易云音乐歌曲" 文章,相信小伙伴们经过实践之后都能够顺利的采集到自己想要听的歌曲。下面的歌词是小编去年11月份采集的民谣歌词,经过统计,歌词量达到将近15万。 用Python采集的民谣歌词 心血来潮,想利用Python来分析一下民谣 ...
分类:
编程语言 时间:
2020-05-21 13:19:17
阅读次数:
90
所谓的短语的语序问题,即给定一个打乱顺序的短语,我们要按照语义信息将其重新组合,新的语序通顺的短语。 举个简单例子,比如我们在识别验证码中的文字的时候,识别出来的文字分别为“哲”,“思”,“学”,“想”,那么重合调整语序后形成的短语应该为“哲学思想”。 这样的问题也会经常出现,除了验证码识别,还有语 ...
分类:
其他好文 时间:
2020-05-18 22:41:39
阅读次数:
123
1.概述 XLNet 与 Bert 有着许多的不同,XLNet 利用一个全新的模型Transformer-XL作为语义表示的骨架, 将置换语言模型的建模作为优化目标,同时在预训练阶段也利用了更多的数据。 最终,XLNet 在多个 NLP 任务上达到了 SOTA 的效果。 2.Two-Stream S ...
分类:
其他好文 时间:
2020-05-17 01:11:43
阅读次数:
71
```pythonfrom collections import defaultdictfrom gensim import corporaimport jiebafrom gensim import similaritiesimport reclass Similarity: def docs(s... ...
分类:
其他好文 时间:
2020-05-14 01:24:08
阅读次数:
55
导论 自然语言处理,NLP,接下来的几篇博客将从四方面来展开: 自然语言处理,NLP,接下来的几篇博客将从四方面来展开: (一)基本概念和基础知识 (二)Embedding (三)Text classification (四)Language Models (五)Seq2seq/Attention ...
分类:
其他好文 时间:
2020-05-13 16:57:32
阅读次数:
60