码迷,mamicode.com
首页 >  
搜索关键字:大数据 sqoop 数据处理    ( 17411个结果
搞懂什么是数据库事务
前言 事务(Transaction)是数据库学习中非常重要的一种概念,作为关系型数据库的核心组成,在数据安全方面有着非常重要的作用。 事务在各大数据库中都有非常广泛的应用,并且对于很多业务,例如电商、支付,是保证其可以正常运行的根基。 本文会逐步解析数据库事务的核心特性,以获得对事务更深的理解,主要 ...
分类:数据库   时间:2021-05-24 10:21:59    阅读次数:0
cube.js预聚合对于大数据量处理的问题
cube.js 的预聚合是一个很不错的功能,但是目前是有一些问题的,比如我们包含了大量的数据(几十完,上百万) 目前官方相关的解决方法 数据拆分 基于文件模式的文件处理(比如cubestore支持csv格式的) 基于stream模式的数据处理(目前官方也比较推荐的模式) 一些说明 目前方案都不太好, ...
分类:Web程序   时间:2021-05-24 09:57:40    阅读次数:0
POP3服务Stat()返回邮件数不准确的问题及解决
近两天用Python调用poplib模块从邮箱下载邮件附件做数据处理,发现了一个意外情况,pop3的stat()返回的邮件数跟预期有很大差距。邮箱里明明有1500+邮件,stat()和list()返回的数量却只有800+。网上搜了一圈,发现有碰到类似情况的,但没有提到原因及解决方案。不得已,自己做了 ...
分类:其他好文   时间:2021-05-24 09:55:09    阅读次数:0
小企业面对大数据如何破局,高并发与海量数据技术又如何操作?
公司的项目数据量有限,获取行业线上线下消费数据也困难,没有足够的数据量,如何应用大数据?如何在公司现有情况下接触实际的高并发大数据项目? 就是想实操一下高并发的架构设计或者参与互联网级别项目的开发,但又不想舍弃现在的工作? 中小企业如何想办法破局 大数据本身就特别容易形成技术垄断,让长尾的中小企业无 ...
分类:其他好文   时间:2021-05-24 09:54:03    阅读次数:0
如何查找卫星历史数据影像
谷歌地球 https://www.google.com/earth/ 谷歌地球(Google Earth,GE)是一款谷歌公司开发的虚拟地球软件,Google Earth来源于Keyhole(锁眼)公司自家原有的旗舰软件。在Google Earth Pro通过拖动时光机功能可以查看不同时期的历史数据 ...
分类:其他好文   时间:2021-05-24 09:52:40    阅读次数:0
java 数据类型
数据类型 java是一种强类型语言 数据类型: 不同数据类型的空间不同 数据类型分类: 基本数据类型:整数型(byte 1字节、short 2、int 4、long 8)、浮点型(float 4、double 8)、布尔型(boolean 1)、字符型(char 2)口诀:12484812 引用数据 ...
分类:编程语言   时间:2021-05-24 08:20:47    阅读次数:0
工科物理实验(郑州科技学院)中国大学MOOC答案
嗯... ...这是我花了好几个小时搜的,分享给大家,可能有的题目对不上(说的是单元测试,随堂测试不会顺序乱和题目不一样),因为顺序,但是大部分都是可以的,祝大家考取好的成绩(先是随堂测验全部的,再是单元测试的全部,都是按照顺序的) 绪论1 误差与不确定度 绪论2 有效数字与数据处理 实验六 电表的 ...
分类:其他好文   时间:2021-05-24 08:14:16    阅读次数:0
杭州蚂蚁中台技术部-22届应届生-校招实习
1:业务背景介绍 本次为22届的实习生校招,请不符合要求的同学不要投简历过来。 本岗位为技术开发和大数据研发岗位,想做产品和运营的同学请移步其他地方投简历谢谢 业务相关的背景请参照: https://job.alibaba.com/zhaopin/position_detail.htm?spm=a2 ...
分类:其他好文   时间:2021-05-24 05:53:07    阅读次数:0
Spark SQL 及其 DataFrame 的基本操作
Spark SQL 及其 DataFrame 的基本操作 Q & A 1. Spark SQL 出现的原因是什么? 关系数据库已经流行多年,能较好的满足各类商业公司的业务数据管理需求,但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作(包括结构化和非结构化数据) ...
分类:数据库   时间:2021-05-24 04:48:45    阅读次数:0
数据传输 oracle 作为来源表 添加schema datax sqoop 解决方案
如若oracle 的账号拥有默认的schema,schema 可写可不写 以下情况适合不拥有默认的schema 如果不加schema 会报错 sqoop 报错如下 datax 报错如下 sqoop sqoop import -Dmapred.job.queue.name=default --num- ...
分类:数据库   时间:2021-05-24 04:06:46    阅读次数:0
17411条   上一页 1 ... 6 7 8 9 10 ... 1742 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!