各位用户： 我们的产品知识圈APP是为了解决广大学生用户问问题难，得到回答针对性不强的问题，以及原创用户最讨厌的抄袭问题。他们需要保护自己的原创知识的所有权，也需要得到的问题的回答更贴合自己的需要，但是现有的方案并没有很好地解决这些需求，我们有独特的办法： （1）使用机器学习的文本分析算法，对发布的 ...
分类：
其他好文 时间：
2020-04-05 20:08:00
阅读次数：
58
经过一周的团队讨论分析，我们给自己的团队选题确定了大致的方向。今天就其中机器学习对文本数据的分析处理简单介绍一下NABCD 1.N: （1）原创用户对文章抄袭问题的反感 （2）低质量文章造成用户不好的体验 2.A: （1）使用机器学习的文本分析算法，对发布的文章进行分析 3.B: （1）实现知识共享 ...
分类：
其他好文 时间：
2020-04-04 20:19:20
阅读次数：
63
一.字段查询解析器 字段查询解析器在指定字段中搜索词项或短语，可以使用该字段定义的任何文本分析方式。f参数指明要进行词项或短语搜索的字段，语法如下： {!field f=myfield}hello world 该语法与使用Lucene查询解析器搜索短语myfield:"hello world"是等价 ...
分类：
其他好文 时间：
2020-03-21 09:47:05
阅读次数：
95
[toc] Lucene是目前最为流行的开源全文搜索引擎工具包，提供了完整的查询引擎和索引引擎，部分文本分析引擎。 我们平时使用kibana、阿里云的日志查询或者其他一些lucene二次开发的产品，几乎都支持lucene语法。 下面给大家演示各种查询方式，更多请参考 "Apache Lucene Q ...
分类：
Web程序 时间：
2020-03-16 09:25:19
阅读次数：
68
pyltp目前支持puthon3.6不支持3.7 用python3.7安装了很久都没有安装成功 无奈换成了3.6 分句 from pyltp import SentenceSplitter sents = SentenceSplitter.split('元芳你怎么看？我就趴窗口上看呗！') # 分句 ...
分类：
其他好文 时间：
2020-03-15 11:42:13
阅读次数：
82
本文始发于个人公众号： TechFlow ，原创不易，求个关注 今天的文章和大家聊聊文本分析当中的一个简单但又大名鼎鼎的算法—— TF idf 。说起来这个算法是自然语言处理领域的重要算法，但是因为它太有名了，以至于虽然我不是从事NLP领域的，但在面试的时候仍然被问过好几次，可见这个算法的重要性。 ...
分类：
编程语言 时间：
2020-03-04 10:03:47
阅读次数：
89
shell shell是一个命令行解释器，它接收应用程序/用户命令，然后调用操作系统内核。 shell还是一个功能强大的编程语言，易编写，易调试，灵活性强。 Shell解析器有： /bin/sh /bin/bash /bin/dash /bin/tcsh /bin/csh bash bash she ...
分类：
系统相关 时间：
2020-02-17 13:59:52
阅读次数：
88
shell是一个命令行解释器，它接收应用程序/用户命令，然后调用操作系统内核。 shell还是一个功能强大的编程语言，易编写，易调试，灵活性强。 Shell解析器有： /bin/sh /bin/bash /bin/dash /bin/tcsh /bin/csh Shell中的变量 1. 常用系统变量 ...
分类：
系统相关 时间：
2020-02-17 12:43:37
阅读次数：
93
程序文本分析介绍，老师教学。QQ：189430648 程序文本分析介绍，老师教学。QQ：189430648 ...
分类：
编程语言 时间：
2020-02-02 19:57:15
阅读次数：
67
安装jieba:pip install jieba 原理： 基于前缀词典实现高效的词图扫描，生成句子中汉字所有可能成词情况所构成的有向无环图 (DAG) 采用了动态规划查找最大概率路径, 找出基于词频的最大切分组合 对于未登录词，采用了基于汉字成词能力的 HMM 模型，使用了 Viterbi 算法 ...
分类：
编程语言 时间：
2020-02-02 19:34:51
阅读次数：
263
