我在重新安装 Visual Studio 2010 和 SQL sever 2012 的时候,安装好的两个软件打开时都遇到了这个问题:“在此计算机中仅有部分 Microsoft Visual Studio 2010 产品已升级到 Service Park 1。只有全部进行升级,这些产品才可以正常运行 ...
分类:
其他好文 时间:
2019-05-02 12:02:31
阅读次数:
177
set spark.executor.instances=20; set spark.executor.cores=5; set spark.executor.memory=5G; ...
分类:
其他好文 时间:
2019-04-27 00:46:46
阅读次数:
172
MangoDB、HBase mongodb和mysql的区别 分布式数据库在WebGIS中的应用 Spark:https://blog.csdn.net/supermapsupport/article/details/78338382 HDFS: ...
分类:
数据库 时间:
2019-04-23 17:15:56
阅读次数:
154
1 Spark读HBase Spark读HBase黑名单数据,过滤出当日新增userid,并与mysql黑名单表内userid去重后,写入mysql。 2 Spark读MySQL表广播出去 3 构建黑名单数据对象rdd 4 Spark写MySQL 5 注意问题 数据存入Mysql注意事项 尽量先设置 ...
分类:
数据库 时间:
2019-04-15 16:41:45
阅读次数:
197
vscode中安装ms-vscode.go插件后可以开启对go语言的支持,ms-vscode.go插件需要依赖一些工具,安装完成后提示 由于网络原因,一些依赖工具无法正常安装,需要进行手动安装. 以下为手动安装的工具的步骤: 在%GOPATH%\src\目录下,建立路径golang.org\x 进入 ...
分类:
其他好文 时间:
2019-04-11 16:33:17
阅读次数:
282
近来newsql大热,尤以TIDB最火,pingcap不断打磨TiDB,现如今版本已经迭代到3.0,产品已经基本趋于成熟。对于TiDB,整体架构图如下图所示是由四个模块组成,TiDBServer,PDServer,TiKVServer,TiSpark。TiDBServer负责接受SQL请求,处理SQL的相关逻辑,并通过PD找到存储计算所需数据的TiKV地址,与TiKV交互获取数据,最终返回结果。T
分类:
数据库 时间:
2019-04-11 11:52:21
阅读次数:
209
Vim 常用命令 1. 插入命令 2. 定位命令(命令模式下) 3. 删除命令 4. 复制和粘贴 5. 替换和取消 6. 搜索和替换 向前搜索指定字符串 搜索时忽略大小写 :set ic 配置文件 vimrc 在 ~/.vimrc 文件中配置(如无此文件,则手动创建) 插件管理 1. 插件管理工具 ...
分类:
系统相关 时间:
2019-04-06 18:28:45
阅读次数:
205
上次完成了功能描述(1)将数据导入到数据库 所以这一次,我准备开始第二个功能:将手册涉及的热词自动分类展示,将每个热词自 动创建关键字、模糊检索两个字段便于检索 起初老师建议的是用spark完成,由于一直在windows没配置好spark环境,在Ubuntu中又太卡,所以我决定用python实现此功 ...
分类:
其他好文 时间:
2019-04-02 23:58:04
阅读次数:
268
T____T~~~~~~~~~~ 仅记录我在Xcode里搭建OpenCV踩过的坑,这个过程特别曲折,本人从19/3/25到19/3/29足足花了五天才配置好这个环境orz。。。中间经历过无数次找死的操作,且听我慢慢讲来。 回顾: 本人开始搭建环境时使用的是 10.11 El Capitan版本的Ma ...
分类:
系统相关 时间:
2019-03-31 09:55:39
阅读次数:
1273
在SparkEnv中创建BroadcastManager, initialize() ...
分类:
其他好文 时间:
2019-03-30 01:05:43
阅读次数:
136