Problem A Brain's Photos 题目大意 n行m列的矩形,每个格子有一种颜色。如果含有C、M、Y则输出#Color,否则输出#Black&White。 解题分析 = = 参考程序 1 #include <map> 2 #include <set> 3 #include <stack ...
分类:
其他好文 时间:
2016-08-21 13:39:08
阅读次数:
122
前言之前一直考虑更换impala的文件存储格式为parquet,但是没有立即使用,最近又做了一些测试,看看parquet是否真的有用。在测试的时候顺便测了一下compute语句的效果,一起作为参考。下面抽出一个小业务的部分测试结果来展示。测试准备库名和表名当然不是真的。测试范围:
文件格式:parquet和text
compute语句的影响
测试用表:
表名
行数
字段数
物理存储大...
分类:
其他好文 时间:
2016-08-21 12:33:53
阅读次数:
211
前言测一下parquet、snappy、gzip、textfile这些方式在hdfs中占用的存储大小。在impala中直接建内部表。测试
存储格式
压缩格式
文件大小
建表时间 textfile
none
3.0 G
38.74s
parquet
none
1.5 G
32.33s
parquet
snappy
709.3 M
31.71...
分类:
其他好文 时间:
2016-08-21 12:32:15
阅读次数:
210
前言由于经常要帮数据分析抽表,因此自己写了个自动生成impala和sqoop脚本的工具,结果今天发现一个库中17张表,只成功导入了12张。仔细检查才发现是是由于impala建表时候字段使用了location关键字的原因。分析建表语句impala-shell -i ip:25004 -q "
DROP TABLE IF EXISTS database.table;
CREATE EXTERNAL TA...
分类:
其他好文 时间:
2016-08-21 12:34:24
阅读次数:
775
传送门
q = 5√+12q \ =\ \frac{\sqrt5+1} 2在黄金系统下面a0a1...ana_0a_1...a_n等于 ∑ni=0ai?qn?i\sum_{i=0}^n a_i?q^{n?i },其中ai a_i 是 00 或者 11。现在给出两个黄金系统下面的数字,请比较他们的大小。Input单组测试数据。第一行有一个字符串 aa 。第二行有一个字符串 bb 。他们都是非空串,可...
分类:
其他好文 时间:
2016-08-21 12:33:33
阅读次数:
144
五大原则 单一职责原则SRP(Single Responsibility Principle)是指一个类的功能要单一,不能包罗万象。如同一个人一样,分配的工作不能太多,否则一天到晚虽然忙忙碌碌的,但效率却高不起来。 开放封闭原则OCP(Open-Close Principle) 一个模块在扩展性方面 ...
分类:
其他好文 时间:
2016-08-21 12:31:08
阅读次数:
139
1.在新节点中进行操作系统配置,包括主机名。网络。防火墙和无密码登录等。 2.在所有节点/etc/host文件中添加新节点 3.把namenode的有关配置文件复制到该节点 4.修改master节点slaves文件,增加改节点 5.单独启动该节点上的datanode和nodemanager $had ...
分类:
其他好文 时间:
2016-08-21 12:30:47
阅读次数:
130
在配置hbase集群将 hdfs 挂接到其它镜像盘时,有不少困惑的地方,结合以前的资料再次学习; 大数据底层技术的三大基石起源于Google在2006年之前的三篇论文GFS、Map-Reduce、 Bigtable,其中GFS、Map-Reduce技术直接支持了Apache Hadoop项目的诞生, ...
分类:
其他好文 时间:
2016-08-21 12:30:27
阅读次数:
229
1111啊111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111111啊111111 ...
分类:
其他好文 时间:
2016-08-21 12:31:36
阅读次数:
117
.tip { position: fixed; left: 50%; bottom: 50%; width: auto; -webkit-transform: translateX(-50%); -ms-transform: translateX(-50%); transform: translat ...
分类:
其他好文 时间:
2016-08-21 12:31:29
阅读次数:
108
1.编码GBK GB2312 被unicode兼容 unicode是万国码 而 utf-8是对万国码的压缩和优化 utf-8的汉字无法正常显示在unicode上(乱码)print 后加U表示用unicode编码 notepad自用utf-8编码 生成的代码编码形式跟CMD不符合2.制表符TAB!=四 ...
分类:
其他好文 时间:
2016-08-21 12:30:31
阅读次数:
136
1.关于tries+=1,在python中,语句块不会单独引进新的作用域,tries还是全局变量,while中改变tries会使tries变量的值改变。 2.逻辑判断。(1)guess!=secret并且tries<6.(2)guess==secret,(3)tries>=6。当(1)不满足时,有( ...
分类:
其他好文 时间:
2016-08-21 12:29:58
阅读次数:
167
恢复内容开始 1.json & pickle 磁盘上只能存储字符串或二进制数据,直接存字典、列表、元组等是存不了的,所以需要把各种数据转换成字符串格式,然后再存到硬盘。 直接将一个字典类型的数据写入硬盘,提示错误:TypeError: write() argument must be str, no ...
分类:
其他好文 时间:
2016-08-21 12:29:58
阅读次数:
244
把参数输入到excel内第二排 运行结果 把AST改为200后运行 ...
分类:
其他好文 时间:
2016-08-21 12:28:25
阅读次数:
243
近期洒家买了个阿里云云服务器ECS玩玩,虽然国内的服务器网速快,但是毕竟在天朝,有的地方玩得也是有些不爽。以下是洒家这两天折腾的记录。 域名 洒家只是搞一个自己用的服务器,因此只需一个免费域名: http://www.freenom.com/ ,用Freenom DNS Server 填上自己的IP ...
分类:
其他好文 时间:
2016-08-21 12:28:43
阅读次数:
684
抽象类:抽象类,只为继承而出现,不定义具体的内容,只规定该有哪些东西;一般抽象类中只放置抽象方法,只规定了返回类型和参数;比如: 人 - 有吃饭,睡觉方法; 男人 - 继承人抽象类,必须实现吃饭,睡觉的方法主体; 女人 - 继承人抽象类,必须四线吃饭,睡觉方法的主体; 抽象类中可以有普通属性,通过子 ...
分类:
其他好文 时间:
2016-08-21 12:28:15
阅读次数:
147