一、Linux上安装scrapyd 1. linux下安装python3 可参考我之前博文:https://www.cnblogs.com/Liu928011/p/14864190.html 2. 安装scrapyd并配置软链接 安装scrapyd:pip3 install scrapyd 配置软链 ...
分类:
其他好文 时间:
2021-07-12 18:17:10
阅读次数:
0
在使用MapReduce的小测试的时候,Driver类启动,或报下面的错误 log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j: ...
分类:
编程语言 时间:
2021-07-12 18:06:41
阅读次数:
0
分析nginx日志 GoAccess的多种展示方式 goaccess有多种数据可视化的方式,分别为: 命令行输出格式化数据 利用access.log生成静态的可视化数据 生成实时可视化数据 注意,如果是编译安装且选择了 –enable-geoip=mmdb的话需要编辑配置文件,并在使用命令的时候带上 ...
分类:
数据库 时间:
2021-07-09 17:55:46
阅读次数:
0
做下面操作前先安装这些工具: yum install virt-install libvirt-admin libvirt-client libvirt-daemon libvirt主要的配置文件和目录 (1) libvirtd服务的主配置文件 /etc/libvirt/libvirtd.conf ...
分类:
其他好文 时间:
2021-07-09 17:54:18
阅读次数:
0
今天学习了大数据的一些基本的概念。 什么是Hadoop: 大数据主要还是解决海量数据的存储和海量数据的分析计算。 大数据的特点:大量、高效、多样(结构化数据和非结构化数据)、低价值密度。 Hadoop的三大发行版本: Apache、cloundera、hortonworks。 当然现在clounde ...
分类:
其他好文 时间:
2021-07-09 17:52:26
阅读次数:
0
1. 日志文件格式包含以下四列: 事件时间 | 发生事件的服务器的主机名 | 产生事件的服务名或程序名 | 事件的具体信息 2. /etc/rsyslog.conf 配置文件 # 服务名称 [连接符号] 日志等级 日志记录位置 authpriv.* /var/log/auth.log # 认证相关服 ...
分类:
系统相关 时间:
2021-07-06 16:25:48
阅读次数:
0
1. 远程配置文件 项目结构 依赖导入 <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </depende ...
分类:
其他好文 时间:
2021-07-05 17:09:01
阅读次数:
0
driverClassName = com.mysql.cj.jdbc.Driver url = jdbc:mysql://localhost:3306/数据库名?serverTimezone=UTC username = root password = 123456 #初始化连接数量 initia ...
分类:
其他好文 时间:
2021-07-05 16:39:21
阅读次数:
0
问题描述: (1)使用Java API创建HDFS文件并写入内容的副本系数为3 (2)使用命令上传至HDFS中的文件副本数为1:举例[hadoop@hadoop000 software]$ hadoop fs -put jdk-8u91-linux-x64.tar.gz / 问题回答: (1)使用J ...
分类:
编程语言 时间:
2021-07-05 16:38:12
阅读次数:
0
背景介绍 近年来,关于低代码(LowCode)和无代码(NoCode)的讨论在前端社区内越来越火,简单的说低代码就是通过编写少量代码的方式完成应用的开发及上线,而无代码则更进一步,不需要编写代码通过配置的方式即可完成整个应用的开发。目前集团内部的低代码平台已经有很多,比如iceluna,宜搭,乐高, ...
分类:
其他好文 时间:
2021-07-02 16:04:51
阅读次数:
0