个推运维平台高级网络工程师山川随着互联网公司规模的扩大，企业对成本控制和数据安全的需求越来越高，大部分公司往往会自建机房，而非租用云服务器。个推在互联网数据中心（InternetDataCenter，简称IDC）网络规划和运营方面也经历了几次的迭代和变迁，同时，我们也对数据中心网络发展的历程进行了总结。我们将围绕IDC网络运营规划的基本要求、传统PC时代的网络架构、移动互联网和大数据时代的IDC网
分类：
其他好文 时间：
2020-10-09 21:23:35
阅读次数：
21
大数据是指无法在一定时间范围内用常规软件工具进行处理和分析的数据集合，需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能的海量、高增长率和多样性的信息资产
分类：
其他好文 时间：
2020-10-08 18:36:53
阅读次数：
17
shuffle阶段 概念 shule 是 Mapreduce 的核心，它分布在 Mapreduce 的 map 阶段和 reduce 阶段。一般把从 Map 产生输出开始到 Reduce 取得数据作为输入之前的过程称作 shule。 一张图看懂Mapreduce全过程 概念解释 Collect阶段 ...
分类：
其他好文 时间：
2020-10-05 21:45:42
阅读次数：
32
集群分发脚本xsync在/usr/local/bin目录下，创建xsync文件[root@yh-hadoop101bin]#pwd/usr/local/bin[root@yh-hadoop101bin]#chmod777xsync[root@yh-hadoop101bin]#lltotal4-rwxr-xr-x1rootroot487Sep2913:58xsync[root@yh-hadoop10
分类：
其他好文 时间：
2020-10-05 21:32:21
阅读次数：
19
在数据管理领域，我们一直致力于让数据为我们提供价值，为此我们付出大量的努力和投入。在过去二十年，各大企业都在着手搭建数据仓库。当我们费尽艰辛搭建好数据仓库并成功用于线上运行时，发现我们将花费更多时间为数据科学家、分析师做数据准备。分析他们的数据需求，提供闪闪发光的数据报表。这将占用数据维护人员80%的时间投入，这个投入是偏高的，包含如沟通、反查、校正等大量重复和不必要投入。如何提升数据管理能力？我
分类：
其他好文 时间：
2020-09-23 23:53:26
阅读次数：
38
一、数据库管理系统数据库管理系统DBMS是一种操纵和管理数据库的大型软件，用于建立、使用和维护数据库。数据库管理系统分为RDBMS和NoSQL（NotonlySQL）两类。RDBMS关系型数据库管理系统，比较适合安全级别要求高的数据及关系较复杂的数据。常见RDBMS有MySQL、Oracle、MSSQL。NoSQL非关系型数据库，适合于高性能存取数据，一般是配合RDBMS进行使用，针对大数据处理分
分类：
数据库 时间：
2020-09-23 23:42:03
阅读次数：
56
1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。 DKhadoop发行版：有效的集成了整个HADOOP生态系统的全部组件，并深度优化，重新编译为一个完整的更高性能的大数据通用计算平台，实现了各部件的有机协调。因此DKH相比开源的大数据平台，在计算性能上有了高达5倍（最大）的性能提升。D ...
分类：
其他好文 时间：
2020-09-23 22:58:58
阅读次数：
34
https://mp.weixin.qq.com/s/cUMYaX8yIeCyVT7ri_KPGgBy超神经场景描述：肥胖已经成为全球性问题，而减肥从来都是口号易喊实践难。很多人工智能公司利用大数据、机器学习、计算机视觉等技术，帮助广大「胖友」管住嘴，迈开腿，同时为其进行个性化瘦身建议。关键词：机器学习计算机视觉大数据减肥「复联4」中，雷神索尔挺着大肚腩出现，昔日的男神竟然变成了「死肥宅」。于是很
分类：
其他好文 时间：
2020-09-21 12:16:13
阅读次数：
48
https://mp.weixin.qq.com/s/nR8TeluLHlea8MGa6qBljgBy超神经场景描述：从古至今，有考试的地方就有作弊，作弊方法可谓是五花八门，妖魔鬼怪各显神通。尽管有法律约束与层层安检搜查把关，却依然难防漏网之鱼。近年来，利用计算机视觉、神经网络等技术，可以更加精准地抓取作弊行为，让考场更加公平。关键词：计算机视觉人工智能监考反作弊不知不觉，又到了一年的高考季。明天
分类：
其他好文 时间：
2020-09-21 11:43:36
阅读次数：
46
https://mp.weixin.qq.com/s/y_uCmLzAuqOhxUa8ksfobwBy超神经场景描述：选礼物是千古大难题之一，母亲节来临之际，借助机器学习、大数据分析、图像增强等AI技术，可以帮你为母亲送上一份走心的礼物。关键词：母亲节机器学习大数据图像增强神经网络距离母亲节只剩两天了，你为母亲大人选好礼物了吗？要让礼物达到美观、实用兼具且能讨母上大人喜欢，这实在是一个令人纠结的难
分类：
其他好文 时间：
2020-09-21 11:41:24
阅读次数：
35
