一、数据预处理 1.1、在hdfs上新建目录 java程序启动前先在hdfs上建立相应文件夹,用于上传本地数据和处理后的数据 [root@hadoop102 ~]# hdfs dfs -mkdir -p /USAdatas/geodatas/inputs [root@hadoop102 ~]# hd ...
分类:
数据库 时间:
2021-06-18 19:17:01
阅读次数:
0
代码实现顺序: 按行读取 按列读取 满足if条件 单元格值赋值给字典 实现代码: datas = []# 定义一个空列表 for i in range (3,nrows): sheet_data={}# 定义一个空字典 for j in range(ncols): c_type=table.cell ...
分类:
编程语言 时间:
2021-06-18 18:48:16
阅读次数:
0
所遇到的问题: 1. 使用datatable.js 异步渲染表格内容时(配置 processing: true),当点击下拉条内的 checkbox按钮,会导致表头缩至隐藏; 2. 方案: 当ajax请求完成,设置(加载div) 样式 margin-top: 0px; ...
分类:
Web程序 时间:
2021-06-18 18:47:58
阅读次数:
0
查看是否区分大小写 show Variables like '%table_names' 查看lower_case_table_names的值,0代表区分,1代表不区分 修改方法 1.用ROOT登录,修改/etc/my.cnf 2.在[mysqld]下加入一行:lower_case_table_na ...
分类:
数据库 时间:
2021-06-17 17:06:18
阅读次数:
0
图解Library Cache 结构说明 Hash Bucket 库缓存相当于一个Hash Table由一组Hash Bucket构成,每个Hash Bucket存储相同哈希值的所有库缓存对象句柄,不同库缓存对象句柄间用指针连接,构成库缓存对象句柄链表(Library Cache Object Ha ...
分类:
数据库 时间:
2021-06-17 16:53:37
阅读次数:
0
第二天 日期:2021/6/16 地点:宿舍 1.1 今日完成任务情况以及遇到的问题 成员今日完成任务情况以及遇到的问题 王玉江 搭建并配置软件开发环境,更新项目燃尽图,任务分工 王生涛 修改并完善团队项目软件需求说明书,搭建并配置软件开发环境 1.2 成员贡献时间 成员贡献时间(h) 王玉江 3. ...
分类:
其他好文 时间:
2021-06-17 16:53:05
阅读次数:
0
spark程序初始化HiveContext报错:空指针异常 版本说明: spark: 1.6.1 scala: 2.10.8 hive: 1.2.1 报错信息 java.lang.RuntimeException: java.lang.NullPointerException at org.apac ...
分类:
其他好文 时间:
2021-06-17 16:37:17
阅读次数:
0
查询数据库中的重复数据——MySQL数据库 1、建表语句 DROP TABLE IF EXISTS `t_people`; CREATE TABLE `t_people` ( `id` bigint(20) UNSIGNED NOT NULL AUTO_INCREMENT, `people_no` ...
分类:
数据库 时间:
2021-06-16 17:52:07
阅读次数:
0
<!DOCTYPE html> <html> <head> <title>table2xls</title> <meta charset="utf-8"> <style type="text/css"> body, table { font-size: 12px; } table { table-l ...
分类:
Web程序 时间:
2021-06-15 18:01:54
阅读次数:
0
1 分组求TopN 一、先看数据: 使用HiveSQL常用的方式为: Select * from table, row_number() over(partition by item order by score desc) rank where rank<=2; 二、输出结果为: 三、解析:row ...
分类:
数据库 时间:
2021-06-13 10:48:09
阅读次数:
0