在自己5年的开发生涯中时常在想crud对开发水平的提升真的有用吗？答案当然是没用的。通过自身的经历告诉大家唯有提高架构思想，完善问题解决方案才有提升的可能。在此就不再啰嗦了直接上干货。 场景描述：有这样一张关系型数据表包括身份证，姓名，年龄，手机号，家庭住址（数据量太大普通关系型数据库已无法支撑）。 ...
分类：
其他好文 时间：
2021-06-13 10:32:35
阅读次数：
0
HBase表热点 1 什么是热点 检索habse的记录首先要通过row key来定位数据行。 当大量的client访问hbase集群的一个或少数几个节点，造成少数region server的读/写请求过多、负载过大，而其他region server负载却很小，就造成了“热点”现象。 2 热点的解决方 ...
分类：
其他好文 时间：
2021-06-13 09:58:55
阅读次数：
0
1. Hadoop 概览Google 三篇论文（GFS -> HDFS，Map-Reduce -> MR，BigTable -> HBase）是 Hadoop 的思想之源。Hadoop 生态非常庞大，其最初两大核心是 HDFS 和 MR，分别负责存储和计算（Hadoop 1.x 中，MR 既负责计算 ...
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题： sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sq ...
分类：
数据库 时间：
2021-06-07 20:36:05
阅读次数：
0
1. 阐述Hadoop生态系统中，HDFS, MapReduce, Yarn, Hbase及Spark的相互关系，为什么要引入Yarn和Spark。 HDFS是Hadoop体系中数据存储管理的基础，它是一个高度容错的系统，能检测和应对硬件故障，在低成本的通用硬件上运行。 HBase构建在HDFS之上 ...
分类：
其他好文 时间：
2021-06-07 20:05:58
阅读次数：
0
查看所有的表 ：list 查看表中所有数据：scan 'staff' 前10条: scan 'test-table',{'LIMIT' => 10} 后10条: scan 'test-table',{'LIMIT' => 10, REVERSED => TRUE} 查看表结构：desc 'staff ...
分类：
其他好文 时间：
2021-06-05 17:36:21
阅读次数：
0
数据导入是所有数模编程的第一步，比你想象的更重要。 先要学会一种未必最佳，但是通用、安全、简单、好学的方法。 『Python 数学建模 @ Youcans』带你从数模小白成为国赛达人。 1. 数据导入是所有数模编程的第一步 编程求解一个数模问题，问题总会涉及一些数据。 有些数据是在题目的文字描述中给 ...
分类：
编程语言 时间：
2021-06-02 16:59:13
阅读次数：
0
两个表，表1 表2 如果要将 表1的数据并入表2用以下语句即可 insert into 表2(字段1,字段2) select 字段1,字段2 from b1 注意把字段名全部写清楚 select * into 新表名 from (select * from T1 union all select * ...
分类：
数据库 时间：
2021-06-02 11:23:15
阅读次数：
0
请求 文档: http://docs.jinkan.org/docs/flask/api.html#flask.request request：flask中代表当前请求的 request 对象 作用：在视图函数中取出本次请求数据 导入：from flask import request 代码位置： ...
分类：
Web程序 时间：
2021-05-25 17:48:44
阅读次数：
0
启动hive时，show databases; 然后报错： 查看自己的配置文件没有问题(hbase-site.xml中配置的mysql账号信息与mysql账号信息一致)，于是乎看别人的解决方法： 第一种解决办法（失败）[1]： 由于没有初始化数据库导致，执行名称初始化数据库，执行命令： schema ...
分类：
数据库 时间：
2021-05-24 16:48:31
阅读次数：
0
