相关参数 计信息的持久化功能 系统级 innodb_stats_persistent = ON 表级- STATS_PERSISTENT = 1 统计信息的持久化优化自动计算 系统级--innodb_stats_auto_recalc 表级--STATS_AUTO_RECALC 持久化统计信息时包含 ...
分类：
数据库 时间：
2020-12-10 11:02:16
阅读次数：
5
一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 ...
分类：
其他好文 时间：
2020-12-10 10:59:18
阅读次数：
4
一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本 ...
分类：
其他好文 时间：
2020-12-10 10:55:10
阅读次数：
3
一、hive用本地文件进行词频统计 1.准备本地txt文件 mkdir wc cd wc echo "hadoop hbase" > f1.txt echo "hadoop hive" > f2.txt 2.启动hadoop，启动hive start-all.sh hive 3.创建数据库，创建文本 ...
分类：
其他好文 时间：
2020-12-09 12:15:14
阅读次数：
5
前言 不知你大规模的用过Redis吗？还是仅仅作为缓存的工具了？在Redis中使用最多的就是集合了，举个例子，如下场景： 签到系统中，一天对应一系列的用户签到记录。电商系统中，一个商品对应一系列的评论。交友系统中，某个用户的一系列的好友。 Redis中集合的特点无非是一个Key对应一系列的数据， 但 ...
分类：
其他好文 时间：
2020-12-08 13:09:21
阅读次数：
18
经常有小伙伴后台私信问我，自己每天大量的时间花在微信上，平常很多重复的操作都需要自己去亲力亲为，效率低的同时，人也累的半死，问我能否能做成自动化。答案是可以的，任何人为操作都能做成自动化，自动化无所不能。今天就微信自动化这一应用场景聊聊几种实现方案。1、wxpywxpy基于itchat，使用了Web端微信的通讯协议，能够实现微信消息管理、好友管理及一些数据统计功能。但是，由于微信对网页版微信的限制
分类：
微信 时间：
2020-12-08 12:12:23
阅读次数：
13
为什么每一个爬虫工程师都应该学习Kafka摄影：产品经理与产品经理环游世界的瞬间这篇文章不会涉及到Kafka的具体操作，而是告诉你Kafka是什么，以及它能在爬虫开发中扮演什么重要角色。一个简单的需求假设我们需要写一个微博爬虫，老板给的需求如下：开发爬虫对你来说非常简单，于是三下五除二你就把爬虫开发好了：接下来开始做报警功能，逻辑也非常简单：再来看看统计关键词的功能，这个功能背后有一个网页，会实时
分类：
其他好文 时间：
2020-12-08 12:02:43
阅读次数：
2
GNE预处理技术——把div标签中的正文转移到p标签中摄影：产品经理买单：kingname大部分的新闻网站，其新闻正文是在p标签中的。所以GNE在统计文本标签密度时，会考虑p标签的数量和p标签中文本的数量。但是也有一些网站，他们的新闻正文是在div标签中的，这种情况下，这些div标签就会干扰文本标签密度的计算。div标签在HTML页面布局时有很大的作用，不能随意改动。但是，如果一个div标签它下面
分类：
其他好文 时间：
2020-12-07 12:45:59
阅读次数：
11
网站精华***测试之嗅探流量抓包剖析分类专栏：***测试网站***测试漏洞检测文章标签：网站***测试网站漏洞检测网站安全防护网站漏洞修复网站安全测试版权在浩瀚的网络中安全问题是最普遍的需求,很多想要对网站进行***测试服务的,来想要保障网站的安全性防止被***被***等问题,在此我们Sine安全整理了下在***安全测试中抓包分析以及嗅探主机服务类型,以及端口扫描等识别应用服务，来综合评估网站安全。8.2.1.T
分类：
Web程序 时间：
2020-12-07 11:46:48
阅读次数：
14
网站安全监测报告预测2020年的网络安全发展趋势分类专栏：网站安全漏洞检测***测试网站漏洞修复文章标签：网站安全检测报告网站安全防护网站漏洞修复网站安全加固网站安全公司版权2020年即将到来，2019年的网站安全工作已经接近尾声，我们SINE网站安全监测平台对上万客户网站的安全防护情况做了全面的安全分析与统计，整理出2020年的网站安全监测预测报告，针对发现的网站漏洞以及安全事件来更好的完善网站安
分类：
Web程序 时间：
2020-12-05 11:27:19
阅读次数：
28
