码迷,mamicode.com
首页 >  
搜索关键字:sqoop 大数据 hadoop 数据预处理 sqoop2    ( 25615个结果
ubuntu安装配置eclipse+hadoop开发环境(十分详细)+WordCount实例
https://blog.csdn.net/QYmufeng/article/details/79580582 我的环境: 系统平台:Ubuntu14.04TLS(64位) Hadoop环境:Hadoop2.8.3 Eclipse:Neon.2 Release(4.6.2) Eclipse插件:ha ...
分类:系统相关   时间:2021-06-17 17:05:08    阅读次数:0
来电科技:基于 Flink + Hologres 的实时数仓演进之路
简介: 本文将会讲述共享充电宝开创企业来电科技如何基于 Flink + Hologres 构建统一数据服务加速的实时数仓 作者:陈健新,来电科技数据仓库开发工程师,目前专注于负责来电科技大数据平台离线和实时架构的整合。 深圳来电科技有限公司(以下简称 “来电科技”)是共享充电宝行业开创企业,主要业务 ...
分类:其他好文   时间:2021-06-17 17:00:49    阅读次数:0
分割数据预处理
日常报错(累~): 小编最近用yolact对BraTS数据集做预测,验证结果如下: 发现ET对于Dice和PPV太小了,根据公式,我一开始以为是模型预测的区域过多导致的。 后面生成图片观察: 忽然之间,意识到,是自己的target生成错了。笔者对这个三个区域,首先是采用边缘提取,获取边缘的坐标,之后 ...
分类:其他好文   时间:2021-06-13 10:35:43    阅读次数:0
Redis学习二(常用五大数据类型)
1. String(字符串) 1.1 简介 String是Redis最基本的类型,一个key对应一个value。 String类型是二进制安全的。意味着Redis的string可以包含任何数据。比如jpg图片或者序列化的对象。 String类型是Redis最基本的数据类型,一个Redis中字符串va ...
分类:其他好文   时间:2021-06-13 10:17:51    阅读次数:0
HTTP长连接与短连接
简介 简单来说, 长连接对于要传输大数据的方式比较适合, 对于与那种短数据, 可以使用短连接. 对于服务器的资源消耗比较少. 参考链接 https://www.cnblogs.com/0201zcr/p/4694945.html code 引用 短连接的操作步骤是: 建立连接——数据传输——关闭连接 ...
分类:Web程序   时间:2021-06-13 10:12:25    阅读次数:0
2020最新Java面试题及答案(带完整目录).pdf
一、JVM 二、Java集合 三、Java多线程并发 四、Java基础 五、Spring原理 六、微服务 七、Netty与RPC 八、网络 九、日志 十、RabbitMQ 十一、MongoDB 十二、设计模式 十三、负载均衡 十四、数据 十五、Java算法 十六、数据结构 十七、Hadoop 十八、 ...
分类:编程语言   时间:2021-06-13 10:00:32    阅读次数:0
易电务配电运维人的日常,一般人学不来!
无人化的值守,其实质并非真正无人,而是基于大数据物联网等手段,将分布在配电室内的各类传感器、采集与通信设备,将各种电气信号、运行参数和环境数据传送到基于云平台的监控中心,对用户配电室进行远程、集中、实时监控。而在每个变电站/配电室中,不再设置值守人员,从而节约配电室的人力成本投入。 ...
分类:其他好文   时间:2021-06-11 18:33:34    阅读次数:0
大数据开发-Spark Join原理详解
数据分析中将两个数据集进行 Join 操作是很常见的场景。在 Spark 的物理计划阶段,Spark 的 Join Selection 类会根 据 Join hints 策略、Join 表的大小、 Join 是等值 Join 还是不等值以及参与 Join 的 key 是否可以排序等条件来选择最 终的 ...
分类:其他好文   时间:2021-06-10 18:28:12    阅读次数:0
Hadoop 数据迁移用法详解
数据迁移使用场景 冷热集群数据分类存储,详见上述描述. 集群数据整体搬迁.当公司的业务迅速的发展,导致当前的服务器数量资源出现临时紧张的时候,为了更高效的利用资源,会将原A机房数据整体迁移到B机房的,原因可能是B机房机器多,而且B机房本身开销较A机房成本低些等. 数据的准实时同步.数据的准实时同步与 ...
分类:其他好文   时间:2021-06-10 18:05:50    阅读次数:0
PDO操作大数据对象
一般在数据库中,我们保存的都只是 int 、 varchar 类型的数据,一是因为现代的关系型数据库对于这些内容会有很多的优化,二是大部分的索引也无法施加在内容过多的字段上,比如说 text 类型的字段就很不适合创建索引。所以,我们在使用数据库时,很少会向数据库中存储很大的内容字段。但是,MySQL ...
分类:其他好文   时间:2021-06-09 10:39:11    阅读次数:0
25615条   上一页 1 ... 3 4 5 6 7 ... 2562 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!