一、背景和痛点 大企业内部,跨团队,跨地域,导致文件共享困难 如果不使用Artifactory,如何实现跨数据中心的文件共享呢? 挂载NFS文件系统,开通跨数据中心的rsync/sftp协议 自研解决方案,通过REST API或者CLI方式, 例如,雅虎的dist工具 私有或者公有的云储存方案 利用 ...
分类:
其他好文 时间:
2020-03-24 18:33:05
阅读次数:
72
创建地图: //OSM图层 let source = new ol.source.OSM() //切片图层tilelayer let layers = new ol.layer.Tile({ source: source,//图层来源 opacity:1,//透明度,默认为1 visible:tru ...
分类:
其他好文 时间:
2020-03-15 00:00:47
阅读次数:
76
简介 ZooKeeper 是一个开源的分布式协调服务,由雅虎创建,是 Google Chubby 的开源实现。分布式应用程序可以基于 ZooKeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、配置维护,名字服务、分布式同步、分布式锁和分布式队列等 ...
分类:
其他好文 时间:
2020-03-12 09:27:10
阅读次数:
63
pig Pig最早是雅虎公司的一个基于Hadoop的并行处理架构,后来Yahoo将Pig捐献给Apache的一个项目,由Apache来负责维护,Pig是一个基于 Hadoop的大规模数据分析平台。 Pig为复杂的海量数据并行计算提供了一个简 易的操作和编程接口,这一点和FaceBook开源的Hive ...
分类:
其他好文 时间:
2020-02-17 19:32:25
阅读次数:
122
2019刚出校门,初到公司,最大的成就是完成了一个全球抓取数据的系统!简单介绍一下这个项目的实现思路以及在项目中踩过的坑,随时告诫自己以后尽量避免! 历时一个半月还多几天,终于通过交付测试了!项目是从全球范围内,通过Google,Bing,雅虎来抓取数据,由于服务器不是特别的好,并且考虑到会有很多的 ...
分类:
其他好文 时间:
2020-01-22 01:16:02
阅读次数:
312
Apache Flink是什么? 在当代数据量激增的时代,各种业务场景都有大量的业务数据产生,对于这些不断产生的数据应该如何进行有效的处理,成为当下大多数公司所面临的问题。随着雅虎对hadoop的开源,越来越多的大数据处理技术开始涌入人们的视线,例如目前比较流行的大数据处理引擎Apache Spar ...
分类:
Web程序 时间:
2020-01-06 22:51:50
阅读次数:
99
DNS解析与ip url 统一资源定位符 它或许指定的是一个文件资源 或许是一个方法(比如接口) 为什么看到的网站会动呢 是因为浏览器可以解析html DNS 解析 ip地址 http权威指南 js引擎 301 302 域名服务器 ip服务器 cookie 是否合法 .cn .org .gov 最高 ...
分类:
Web程序 时间:
2019-12-28 16:16:33
阅读次数:
110
摘要: 无论是在工作中,还是在面试中,web前端性能的优化都是很重要的,那么我们进行优化需要从哪些方面入手呢?可以遵循雅虎的前端优化34条军规,不过现在已经是35条了,所以可以说是雅虎前端优化的35条军规。已分类,挺好的,这样对于优化有一个比较清晰的方向 内容部分 1.尽量减少HTTP请求数 80% ...
分类:
其他好文 时间:
2019-12-12 13:21:07
阅读次数:
76
Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别 Pig 一种操作hadoop的轻量级脚本语言,最初又雅虎公司推出,不过现在正在走下坡路了。当初雅虎自己慢慢退出pig的维护之后将它开源贡献到开源社区由所有爱好者来维护。不过现在还是有些公司在用,不过我认为与其使用pig ...
分类:
其他好文 时间:
2019-11-26 09:26:54
阅读次数:
75
雅虎日本是一家雅虎和软银合资的日本互联网公司,是日本最受欢迎的门户网站之一。雅虎日本的互联网服务在日本市场占主导地位。 下图从三个维度显示了雅虎日本的经营规模。第一个是服务数量,雅虎日本提供上百种互联网服务;第二个是服务器数量,雅虎日本使用超过 150,000 台服务器(大多为裸机服务器)全天候支持 ...
分类:
其他好文 时间:
2019-11-17 20:51:36
阅读次数:
87