最近在研究Spark,准确的说是pyspark,为了搭个测试环境,之前一直在云上开Linux机器来搭Hadoop,但是Spark可以Local执行,我就打算在本地搭个环境。遇到了一些问题,记录一下,也给其他朋友一个思路。 pyspark在本地搭建需要 Java JDK 1.8.0 Anacoda3 ...
在使用zookeper的时候一般不使用原生的API,Curator,解决了很多Zookeeper客户端非常底层的细节开发工作,包括连接重连、反复注册Watcher和NodeExistsException异常等等。 Curator包含了几个包: curator-framework:对zookeeper ...
安装前提: 确保电脑已经安装了JDK,要求在1.8以上,并且安装目录不能包括空格 下载 下载地址:https://www.elastic.co/cn/downloads/elasticsearch 选择WINDOWS版本进行下载 下载后解压到要安装的目录 /conf/目录下是相应配置文件 elast ...
一、参考我之前的博客,Delphi可以很方便的把类和结构体转换成JSON数据,但是数据量大了,就会非常之慢,1万条数据需要20秒左右。如果引用Serializers单元,那么100万数据只需要4秒左右,每秒处理20万+,速度还是很快的。 二、写一个简单的类 二、写个100万的大循环,创建100万个类 ...
分类:
Windows程序 时间:
2019-03-09 01:14:10
阅读次数:
1141
一、什么是泛型 泛型是具有占位符(类型参数)的类、结构、接口和方法,这些占位符是类、结构、接口和方法所存储或使用的一个或多个类型的占位符。泛型集合类可以将类型参数用作它所存储的对象的类型的占位符;类型参数作为其字段的类型及其方法的参数类型出现。泛型方法可以将其类型参数用作其返回值的类型或者其某个形参 ...
地理编码:将具体地址数据转换为对应坐标点经纬度功能 大致思路: 1、从数据库取得具体地理位置 2、将地址作为参数访问API接口,获取返回数据 3、处理response数据并将经度(lng、longitude)、纬度(lat、latitude)存入数据库 API接口:http://api.map.ba ...
.Windows Touch Input WM GESTURE WM TOUCH ...
说到WebApi管理和测试工具其实已经非常多的了,Postman、Swagger等在管理和维护上都非常出色;在性能测试方面也有不少的工具如:wrk,bombardier,http_load和ab等等。不过这些工具都具有单一性,管理和维护好的在性能测试上比较低效,对于性能测试好的在管理和维护上不理想! ...
SharpZipLib是一个开源的C#压缩解压库,应用非常广泛。就像用ADO.NET操作数据库要打开连接、执行命令、关闭连接等多个步骤一样,用SharpZipLib进行压缩和解压也需要多个步骤。SharpZipLib功能比较强大,在很多C#的应用中,都有它的身影,我们可以通过引入SharpZipLi ...
关于窗体之间的传值我在《编程技巧与维护》杂志上写过总结文章,比较久远了。 开始的时候,用下面的方法传递,程序运行正常。 Form1f1=this.OwnerasForm1; //Form1f1=(Form1)this.Owner;(这样写也可以) f1.DawnCommPortProperty.sPort=CBCommPort.Text;//串口号 f1.DawnCo
端口可选1-65536 1-1024 预保留端口 留给windows系统服务的 下面是常见的端口对应的服务 1 TCP Port Service Multiplexer 传输控制协议端口服务多路开关选择器 21,20 ftp File Transfer[Control] 文件传输协议(控制) 22 ...
下载Git并安装 下载地址:https://git-scm.com/ 安装一般默认即可 配置用户信息 配置之前最好已经有了Github的账号,如果没有可以先去注册一个 安装后打开Git Bash git config --global user.name "userName" //绿色部分为GitH ...
关于win10系统安装HCL模拟器2.1.1版本常见的一些问题(自制)
分类:
Windows程序 时间:
2019-03-10 00:05:21
阅读次数:
3040
DELPHI中完成端口(IOCP)的简单分析(1) 用DELPHI开发网络代码已经有一段时间了! 我发现在网上用VC来实现完成端口(IOCP)的代码很多,但是使用DELPHI来实现的就比较少了。对IOCP讲的清楚的就更少了。在这里我把自己编写DELPHI下的IOCP写出来,希望对刚学完成端口的朋友有 ...
下载地址 https://www.sonatype.com/oss-thank-you-win64.zip; cmd管理员运行命令 nexus.exe/install Nexus Service;(nexus,exe /run) 在windows服务里找到Nexus服务并启动; 访问http://l ...
一、HBase表的基本结构 1.概述: 平时常见的MySQL、Oracle数据库都是传统型关系数据库,它们都是按行查询、按行存储;而HBase为非关系型数据库,它是按列存储的的。 在HBase插入数据时,先输入数据的格式为rowkey => info => column => value rowke ...