当前Spark最新版本为Spark 2.4.5。Spark 使用Hadoop’s client libraries 存取HDFS and YARN。下载是流行hadoop版的便宜预包装。用户也可以下载免hadoop的二进制包，通过参数Spark’s classpath 运行spark 用于任何Had ...
分类：
其他好文 时间：
2020-02-22 13:56:26
阅读次数：
182
CDN是一个致力于使内容传输更快、更高效的针对webserver的全局分布式网络。通过CDN来复制使这些内容能够在非常多地方同一时候存在。 比較有名的CDN厂商有AKamari,Amazon Cloudfont以及Edgecast。 为什么CDN会存在？最根本的原因...获得更好的用户体验。并且第二 ...
分类：
其他好文 时间：
2020-02-14 22:24:52
阅读次数：
112
zombodb 默认对于es的连接是没有密码的，很不安全，可选的方式，基于nginx+basci auth 使用es 的X-Pack，使用amazon的opendistro 也是一个很不错的方案,以下是一个简单测试，同时 会有关于使用basic auth 模式的连接配置 注意，测试使用的pg zom ...
分类：
数据库 时间：
2020-02-13 14:48:31
阅读次数：
102
Amazon Simple Storage Service (Amazon S3) 是一种面向 Internet 的存储服务。您可以通过 Amazon S3 随时在 Web 上的任何位置存储和检索的任意大小的数据。您可以使用 AWS 管理控制台简单而直观的 web 界面来完成这些任务。 bucket ...
分类：
其他好文 时间：
2020-01-28 14:02:41
阅读次数：
59
The year in AI: 2019 ML/AI advances recap 2020-01-26 11:47:14 Source: https://medium.com/@xamat/the-year-in-ai-2019-ml-ai-advances-recap-c6cc1d902d5 I ...
分类：
其他好文 时间：
2020-01-26 13:11:07
阅读次数：
149
写在前面 上篇IaaS-PaaS-SaaS定义中介绍了云计算的3种服务模型： 本文解释这张图的由来，即云服务模型的演进过程 一.表层模型 早在2008年，Microsoft等公司（在此之前还有Amazon、Google）就在探索云服务了。推出Azure时，Microsoft提出了这样的模型图： 用来 ...
分类：
其他好文 时间：
2020-01-20 20:49:53
阅读次数：
79
【卸载】 卸载系统自带的不常用软件 sudo apt-get remove thunderbird totem rhythmbox empathy brasero simple-scan gnome-mahjongg aisleriot gnome-mines cheese transmission ...
分类：
系统相关 时间：
2020-01-18 16:53:41
阅读次数：
129
HDFS，是Hadoop Distributed File System的简称，是Hadoop抽象文件系统的一种实现。Hadoop抽象文件系统可以与本地系统、Amazon S3等集成，甚至可以通过Web协议（webhsfs）来操作。HDFS的文件分布在集群机器上，同时提供副本进行容错及可靠性保证。例 ...
GitHub 逐渐成为一个中心，超过 4000 万开发人员使用 GitHub 来分享项目的代码，无论是个人的、行业的还是其他的。 在去年，因为与 Google 和 Amazon 的竞争，微软以 75 亿美元的价格收购了 GitHub，这很快成为它吸引云开发人员的关键。 作为开发人员的最大活跃站点之一 ...
分类：
编程语言 时间：
2020-01-14 16:32:56
阅读次数：
155
原材料来自AWS官方白皮书https://aws.amazon.com/whitepapers/S3的适用场景：AmazonS3isusedtostoreanddistributestaticwebcontentandmedia静态网站内容和媒体文件。AmazonS3isusedtohostentirestaticwebsites.静态网站托管。AmazonS3isusedasadatastore
分类：
其他好文 时间：
2020-01-14 11:30:39
阅读次数：
105
