主要的问题是在命令窗口输入 pyspider all 出现phantomjs exited，以及在端口localhost：5000打不开pyspider 的web服务。我这边就不说我走过的坑了，主要讲讲如何解决： 现在async已经是python的关键词了，但是你正常的pyspider all 运行 ...
分类：
Web程序 时间：
2020-01-03 10:24:21
阅读次数：
406
简介 一个国人编写的强大的网络爬虫系统并带有强大的WebUI 采用Python语言编写，分布式架构，支持多种数据库后端，强大的WebUI支持脚本编辑器，任务监视器，项目管理器以及结果查看器 官方文档：http://docs.pyspider.org/en/latest/ 安装 pip install ...
分类：
其他好文 时间：
2020-01-01 17:11:01
阅读次数：
122
安装完爬虫框架pyspider之后，使用pyspider all 命令，输入http://localhost:5000运行就出现上述错误 原因是因为WsgiDAV发布了版本 pre-release 3.x。 解决方法如下： 在安装包中找到pyspider的资源包，然后找到webui文件里面的webd ...
分类：
Web程序 时间：
2019-12-28 19:23:24
阅读次数：
111
我们在做APP自动化的时候，定位是很重要的，就像做webUI自动化一样，但是个人觉得app定位比web要复杂点，毕竟app定位表达式写了之后并没有工具验证改表达式是唯一的，所以导致工作量很大 今天主要总结下我们做app自动化需要用到的3大定位工具 uiautomatorviewer 这个工具是用我们 ...
分类：
移动开发 时间：
2019-12-26 13:29:36
阅读次数：
296
1、安装Python3.7.4、配置python的环境变量， 以及下载浏览器驱动包放入到C:\Python37目录下。 2、安装RobotFramework 在dos中输入：pip install robotframework， 出现如下界面表示安装成功！ 3、安装RobotFramework ri ...
分类：
其他好文 时间：
2019-12-20 13:40:03
阅读次数：
75
PS：在运行Spark应用程序的时候，driver会提供一个webUI给出应用程序的运行信息，但是该webUI随着应用程序的完成而关闭端口，也就是 说，Spark应用程序运行完后，将无法查看应用程序的历史记录。Spark history server就是为了应对这种情况而产生的，通过配置，Spark ...
分类：
其他好文 时间：
2019-12-12 15:18:31
阅读次数：
132
1．用户接口：Client CLI（hive shell）、JDBC/ODBC(java访问hive)、WEBUI（浏览器访问hive） 2．元数据：Metastore 元数据包括：表名、表所属的数据库（默认是default）、表的拥有者、列/分区字段、表的类型（是否是外部表）、表的数据所在目录等； ...
分类：
其他好文 时间：
2019-11-20 21:53:13
阅读次数：
78
前言Sonar是一个用于代码质量管理的开放平台，通过插件机制，Sonar可以集成不同的测试工具、代码分析工具以及持续集成工具。与持续集成工具（如Hudson/Jenkins等）不同，Sonar并不是简单地把不同代码检查结果（例如：FindBugs、PMD等）直接显示在webUI界面上，而是通过不同的插件对这些结果再加工处理，通过量化的方式度量代码质量的变化，从而可以方便地对不同规模和种类的工程进行
分类：
其他好文 时间：
2019-11-19 18:48:21
阅读次数：
114
常见端口汇总：Hadoop： 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口 8485 ： JournalNode 的RPC端口 8019 ： ZKFC端口 19888：j ...
分类：
其他好文 时间：
2019-11-18 20:10:58
阅读次数：
79
前言：这篇博文是基于dockerSwarm群集环境之上，延伸了DockerSwarm的功能。博文大纲：一、DockerSwarm网络管理二、二、Swarm的service管理及版本更新这篇博文的环境还是基于上一篇博文中搭建的环境，具体可以参考博文：DockerSwarm群集配置实战（1），在进行接下来的操作之前，必须要保证访问dockerSwarm的webUI时，可以看到以下界面：一、Docker
分类：
其他好文 时间：
2019-10-30 23:03:10
阅读次数：
159
