阿里云发布了许多产品,今天让我们来了解下大数据计算服务MaxCompute这款产品吧。 什么是MaxCompute呢? MaxCompute是由阿里云自主研发,是阿里巴巴自主研发的海量数据处理平台。提供针对TB/PB级数据、实时性要 ...
分类:
其他好文 时间:
2017-03-17 19:07:05
阅读次数:
204
大型网站为了软解大量的并发访问,除了在网站实现分布式负载均衡,远远不够。到了数据业务层、数据访问层,如果还是传统的数据结构,或者只是单单靠一台服务器扛,如此多的数据库连接操作,数据库必然会崩溃,数据丢失的话,后果更是 不堪设想。这时候,我们会考虑如何减少数据库的联接,一方面采用优秀的代码框架,进行代 ...
分类:
数据库 时间:
2017-02-08 11:43:13
阅读次数:
234
易购商城的第一天 1 安排计划 1、电商行业的背景。 2、易购商城的介绍。 3、工程项目的搭建。 2 电商行业介绍 2.1 电商行业技术特点 技术新 技术范围广 分布式 高并发、集群、负载均衡、高可用 海量数据 业务复杂 系统安全 3 易购商城 3.1 易购商城简介 3.1.1 电商行业的模式: B ...
分类:
其他好文 时间:
2017-02-06 22:25:18
阅读次数:
228
DAO层:DAO层主要是做数据持久层的工作,负责与数据库进行联络的一些任务都封装在此,DAO层的设计首先是设计DAO的接口,然后在Spring的配置文件中定义此接口的实现类,然后就可在模块中调用此接口来进行数据业务的处理,而不用关心此接口的具体实现类是哪个类,显得结构非常清晰,DAO层的数据源配置, ...
分类:
其他好文 时间:
2017-01-23 17:01:48
阅读次数:
184
本来不想写,这一年浑浑噩噩,没啥可回顾的;但想了想,还是写个流水账,至少留个念想。 在2016年中,技术上没有什么长进,计划的马拉松也没有完成(跑步这事完全断掉了),机器学习的也没有太好的进展,英语学习也没有坚持下来,数学和统计学的学习同样没有坚持下来,尝试的报名了数据挖掘的比赛,然后我报完名就没有 ...
分类:
其他好文 时间:
2016-12-31 20:44:01
阅读次数:
155
Sqoop 的产生主要源于以下几种需求: 1、多数使用 Hadoop 技术处理大数据业务的企业,有大量的数据存储在传统的关系型数据库(RDBMS)中。 2、由于缺乏工具的支持,对 Hadoop 和 传统数据库系统中的数据进行相互传输是一件十分困难的事情。 3、基于前两个方面的考虑,亟需一个在 RDB ...
分类:
其他好文 时间:
2016-11-30 09:30:58
阅读次数:
252
业务需求:用户通过checkbox选择筛选条件,根据用户选择的条件查询出相应的数据 数据存储格式:“1,2,3,4” 传入参数格式:“1,3” 难点:1.用户选择的筛选条件是不确定的 2.要是实现参数和数据库信息一一对比 思路:因为参数数量不确定,那么就考虑动态参数。 那么问题来了,懂ef的都知道动 ...
分类:
其他好文 时间:
2016-11-29 21:22:16
阅读次数:
169
OSS即 The Office of Strategic Services的简称,是一个综合的业务运营和管理平台,同时也是真正融合了传统IP数据业务与移动增值业务的综合管理平台。 OSS是电信运营商的一体化、信息资源共享的支持系统,它主要由网络管理、系统管理、计费、营业、账务和客户服务等部分组成,系 ...
分类:
其他好文 时间:
2016-11-12 19:26:36
阅读次数:
312
什么是流量工程 流量工程是指根据各种数据业务流量的特性选取传输路径的处理过程。流量工程用于平衡网络中的不同交换机、路由器以及链路之间的负载。 [编辑] 流量工程的内容 流量工程的内容 流量工程在复杂的网络环境中,控制不同的业务流走不同的路径,关键的业务走可靠的路径并保证服务质量,并且在某段网络拥塞的 ...
分类:
其他好文 时间:
2016-10-22 21:19:37
阅读次数:
198
DAO层:DAO层主要是做数据持久层的工作,负责与数据库进行联络的一些任务都封装在此,DAO层的设计首先是设计DAO的接口,然后在Spring的配置文件中定义此接口的实现类,然后就可在模块中调用此接口来进行数据业务的处理,而不用关心此接口的具体实现类是哪个类,显得结构非常清晰,DAO层的数据源配置, ...
分类:
其他好文 时间:
2016-09-27 19:38:42
阅读次数:
183