spark dataframe派生于RDD类，但是提供了非常强大的数据操作功能。当然主要对类SQL的支持。 在实际工作中会遇到这样的情况，主要是会进行两个数据集的筛选、合并，重新入库。 首先加载数据集，然后在提取数据集的前几行过程中，才找到limit的函数。 而合并就用到union函数，重新入库，就 ...
分类：
其他好文 时间：
2018-09-30 20:01:05
阅读次数：
377
Linux下可以使用nohub来使Flask项目在后台运行，而windows环境下没有nohub命令，如何让Flask项目在windows中在后台运行而不显示命令行窗口呢？ 1.写一个.bat脚本来启动Flask程序 # app.py是Flask项目启动入库 python app.py 2.写一个. ...
例如： 我想把 -- 后面的注释内容去掉； 步骤如下： 1、Ctrl + P ，打开替换窗口 2、选择正则表达式 3、写正则表达式内容 --.+ 4、全部替换 为空白 备注：在任意文本编辑器中（支持正则的）都是可以。 ...
分类：
数据库 时间：
2018-09-27 18:12:27
阅读次数：
644
1、Zookeeper简介： 1) 中间件，为分布式系统提供协调服务 2) 作用于分布式系统，发挥其优势，可以为大数据服务 3) 支持Java，提供java和c语言的客户端api 2. 分布式系统 1) 很多台计算机组成一个整体，一个整体一致对外并且处理同一请求 2) 内部的每台计算机都可以相互通信 ...
分类：
其他好文 时间：
2018-09-25 01:13:03
阅读次数：
187
图片和表不方便复制 详情请阅读原文http://c.raqsoft.com.cn/article/1536633176729?r=niu JSON作为一种轻量级的数据交换格式，因其易于读写和交互的特点，已逐渐成为主流的数据类型之一。常见的编程语言大多都对 JSON 的读取与解析提供了接口，但是接下来 ...
分类：
Web程序 时间：
2018-09-25 01:10:20
阅读次数：
210
一、关于能力的浅析 测试团队的能力由个人能力和团队合作能力两个方面构成，两者相辅相成。为了有效提高能力，首先对个人能力和团队能力进行一些浅显的分析。 1、个人能力 (1)个人能力的概念 通俗地说，我们可以认为个人能力是达到优异绩效所需的知识、技能和素质的组合，这里的素质包含了大百科全书所说的个性心理 ...
分类：
其他好文 时间：
2018-09-24 12:51:04
阅读次数：
240
Scrapy 对接 Selenium（参考代码网址，https://github.com/Python3WebSpider/ScrapySeleniumTest） 此文就是参考书上的代码拿下来跑，作为借鉴，很多地方都不是很理解，也是我第一次使用mongodb入库数据，一直用的都是mysql对mong... ...
分类：
其他好文 时间：
2018-09-18 19:24:08
阅读次数：
180
今天学了机器学习第一节, 希望能够坚持下去,其实不在乎课程是什么?关键要坚持下去 今天主要学了对矩阵的一些操作, 用的库是numpy 开始从头到尾捋一遍, 作者说的很有道理,学计算机,动手能力要强,所以以后尽量不要用pycharm,养成了不好的习惯 1.首先,第一个是导入库 import numpy ...
分类：
其他好文 时间：
2018-09-17 19:57:41
阅读次数：
153
编译系统和运行时的系统（参照编译原理第三版第11章） 源程序———预处理器———修改后的源程序——编译器———汇编程序————汇编器————可重定位的目标程序————链接器（加入库文件和可重定位的目标文件）————可执行的目标程序 大多数编译系统提供一个驱动程序来调用预处理器、编译器、汇编器、链接器 ...
分类：
其他好文 时间：
2018-09-13 21:38:10
阅读次数：
192
Table of Contents 重构的功能 ORM 数据导入 库存 库存规则 MRP 多步路线 新功能 IoT Odoo12 预计 2018/10 在 Odoo experience 2018 峰会发布，截止目前 大部分功能都已就绪。 重构的功能 ORM 支持批量新建、修改记录 增加 装饰器 @... ...
分类：
其他好文 时间：
2018-09-13 20:19:00
阅读次数：
2332
