本文所指之数据工程，限定于: 数据分析、数据采集(集成) 1 网站 spider-flow - 智能高效的在线爬虫 spider-flow 是一个无需写代码的爬虫平台，以图形化方式定义爬虫流程，无需代码即可实现一个爬虫 superset.workerindata.com - 账号: bilibili ...
分类：
数据库 时间：
2021-06-11 18:27:40
阅读次数：
0
宝塔是一款Linux可视化软件 1.一键安装 apt-get install wget && wget -O install.sh http://download.bt.cn/install/install_6.0.sh && bash install.sh 2.卸载 1）打开shell终端，输入命 ...
分类：
系统相关 时间：
2021-06-11 18:10:52
阅读次数：
0
一个新的需求，需要在shell脚本中退出当前登录用户 方式一 #!/bin/bash I=$(tty |awk -F '/dev/' '{print $2}') pkill -kill -t $I 方式二 #!/bin/bash I=$(who am i|awk '{print $2}') pkil ...
分类：
系统相关 时间：
2021-06-11 17:45:51
阅读次数：
0
一、文件存储 kafka 使用日志文件的方式来保存生产者和发送者的消息，每条消息都有一个 offset 值来表示它在分区中的偏移量。Kafka 中存储的一般都是海量的消息数据，为了避免日志文件过大，一个分片 并不是直接对应在一个磁盘上的日志文件，而是对应磁盘上的一个目录，这个目录的命名规则是<top ...
分类：
其他好文 时间：
2021-06-11 17:32:01
阅读次数：
0
一，打开xshell，连接上 输入指令：mysql -h 192.168.10.120 -u root -p 回车,-h后面是数据库hostname，-u后面是数据库用户名，-p后面是密码 1 root@VM-0-12-centos[14:05:47]:~ 2 $ mysql -h ** -u ** ...
分类：
数据库 时间：
2021-06-10 18:40:18
阅读次数：
0
只是简单测试使用的话，在系统上操作就行，tina默认使用 procd-init 并在其中集成了喂狗功能，所以要先关了自带的喂狗功能。 先让procd停止喂狗： ubus call system watchdog '{"magicclose": true}' ubus call system watc ...
分类：
系统相关 时间：
2021-06-10 18:29:23
阅读次数：
0
1. Spring Boot概述 目标：了解Spring Boot是什么，有什么作用 小结： Spring Boot是一个便捷搭建 基于spring工程的脚手架；作用是帮助开发人员快速搭建大型的spring 项目。简化工程的配置，依赖管理；实现开发人员把时间都集中在业务开发上。 2. Spring ...
分类：
编程语言 时间：
2021-06-10 18:00:32
阅读次数：
0
手把手教你拍出一个高质量的教育短视频，这是一节对短视频小白极其友好、舒适的课程。本节的学习目标是从头到尾完整体验一遍制作短视频的过程，首先我们需要知道完成一个短视频制作有哪些步骤，很简单，一共有六步。 （更多精彩干货请关注共众号：萤火宠） 接下来我们就按照这个步骤依次展开讲解。 首先第一步确定主题： ...
分类：
其他好文 时间：
2021-06-10 17:43:21
阅读次数：
0
一、Logstash Logstash诞生于2009年8月，2013年被ElasticSearch公司收购。Logstash是一个分布式日志收集框架，开发语言是JRuby，经常与ElasticSearch，Kibana配合使用组成著名的ELK技术栈，所谓ELK就是ElasticSearch、Logs ...
分类：
其他好文 时间：
2021-06-10 17:43:01
阅读次数：
0
一、主从复制原理过程 1、Slave 服务器上执行 start slave，开启主从复制开关。 2、此时，Slave服务器的IO线程会通过在Master上授权的复制用户权限请求连接Master服务器，并请求从指定Binlog 日志文件的指定位置(日志文件名和位置就是在配置主从复制服务时执行 chan ...
分类：
数据库 时间：
2021-06-09 15:33:37
阅读次数：
0
