0、背景在当今世界，各行各业每天都有海量数据产生，为了从这些海量数据中获取想要的分析结果，需要对数据进行提取、转换，存储，维护，管理和分析。这已然远远超出了普通处理工具、数据库等的实现能力，只有基于的分布式架构和并行处理机制的大数据工具所才能实现这些功能。Elasticsearch是响应如前所述大多数用例的最热门的开源数据存储引擎之一。Elasticsearch是一种分布式数据存储和搜索引擎，具有
分类：
其他好文 时间：
2020-07-31 01:10:28
阅读次数：
62
K8s 常见问题及解决方案 我已经通过k8s官方提供的解决方案安装的docker，并且docker可以成功运行。 启动minikube的时候出现的问题 xiaoqu@k8s2:~$ sudo minikube start --driver=none [sudo] password for xiaoq ...
分类：
其他好文 时间：
2020-07-30 18:17:05
阅读次数：
69
from selenium import webdriver options = webdriver.ChromeOptions() options.add_argument("--auto-open-devtools-for-tabs") driver = webdriver.Chrome(chr ...
分类：
编程语言 时间：
2020-07-30 14:26:27
阅读次数：
110
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.baidu.com/") #截屏 time.sleep(3) #获取网页源代码 a=driver.page_sour ...
分类：
Web程序 时间：
2020-07-30 01:25:41
阅读次数：
89
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.douban.com/") time.sleep(2) driver.execute_script('window. ...
分类：
Web程序 时间：
2020-07-30 01:21:31
阅读次数：
95
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.douban.com/") driver.find_element_by_xpath('//*[@id="anony ...
分类：
Web程序 时间：
2020-07-30 01:19:09
阅读次数：
86
1. 安装chrome 1.1 添加repo源 sudo vi /etc/yum.repos.d/google.repo 在打开的空文件中填入以下内容 [google] name=Google-x86_64 baseurl=http://dl.google.com/linux/rpm/stable/ ...
分类：
系统相关 时间：
2020-07-29 17:41:49
阅读次数：
79
PHP7里面使用如下库，操作比较复杂 PHP7连接MongoDB语法如下： //参数规则: mongodb://账号:密码@IP:端口/数据库 $manager = new \MongoDB\Driver\Manager("mongodb://php:123456@localhost:27017/p ...
分类：
数据库 时间：
2020-07-29 09:52:05
阅读次数：
74
Spark的架构图 1、RDD(弹性分布式数据集) RDD是对象的分布式集合。 RDD以并行方式应用和记录数据转换 RDD也提供数据沿袭——以图形形式给出每个中间步骤的祖先树，当RDD的一个分区丢失，可以根据祖先树重建该分区。 RDD有两组操作，转换(transformation)和行动(actio ...
分类：
其他好文 时间：
2020-07-28 22:37:30
阅读次数：
72
# 定位到table，并获得table中所有得tr元素 menu_table = self.driver.find_element_by_xpath("//div[@class='datagrid-view1']/div[2]/div/table") rows = menu_table.find_e ...
分类：
编程语言 时间：
2020-07-28 17:25:27
阅读次数：
137
