8月27日下午，在IT168系统架构师大会存储与系统架构分论坛上，淘宝网技术委员会主席，淘宝网核心工程师章文嵩向我们详细介绍了淘宝网图片处理与存储系统的架构。章文嵩博士的演讲日程包括了淘宝的整个系统架构、淘宝图片存储系统架构，淘宝网独立开发的TFS集群文件系统，前端CDN系统以及淘宝网在节能服务器方
分类：
其他好文 时间：
2016-01-29 19:49:33
阅读次数：
237
本篇论文的原文可谓通俗易懂、行云流水、结构清晰、图文并茂……正如作者所说的——"替换Facebook的图片存储系统就像高速公路上给汽车换轮子，我们无法去追求完美的设计……我们花费了很多的注意力来保持它的简单"，本篇论文也是一样，没有牵扯空洞的庞大架构、也没有晦涩零散的陈述，有的是对痛点的反思，对目标
分类：
Web程序 时间：
2016-01-29 12:14:06
阅读次数：
244
作为一名从小就看篮球的球迷，会经常逛虎扑篮球及湿乎乎等论坛，在论坛里面会存在很多精美图片，包括NBA球队、CBA明星、花边新闻、球鞋美女等等，如果一张张右键另存为的话真是手都点疼了。作为程序员还是写个程序来进行吧！所以我通过Python+Selenium+正则表达式+urllib2进行海量图片爬取。...
分类：
编程语言 时间：
2015-12-18 06:53:13
阅读次数：
373
在主流的Web站点中，图片往往是不可或缺的页面元素，尤其在大型网站中，几乎都将面临“海量图片资源”的存储、访问等相关技术问题。在针对图片服务器的架构扩展中，也会历经很多曲折甚至是血泪教训（尤其是早期规...
分类：
Web程序 时间：
2015-07-29 07:58:05
阅读次数：
148
在主流的Web站点中，图片往往是不可或缺的页面元素，尤其在大型网站中，几乎都将面临“海量图片资源”的存储、访问等相关技术问题。在针对图片服务器的架构扩展中，也会历经很多曲折甚至是血泪教训（尤其是早期规划不足，造成后期架构上很难兼容和扩展）。本文将以一个真实垂直门户网站的发展历程，向大家娓娓道来。构建...
分类：
Web程序 时间：
2015-07-05 00:45:59
阅读次数：
248
在主流的Web站点中，图片往往是不可或缺的页面元素，尤其在大型网站中，几乎都将面临“海量图片资源”的存储、访问等相关技术问题。在针对图片服务器的架构扩展中，也会历经很多曲折甚至是血泪教训（尤其是早期规划不足，造成后期架构上很难兼容和扩展）。本文将以一个真实垂直门户网站的发展历程，向大家娓娓道来。构建...
分类：
Web程序 时间：
2015-06-29 23:58:11
阅读次数：
258
一、mogilefs简介mogilefs是一种分布式存储（不可挂载，通过API调用或专门客户端）的解决方案，可存储海量图片、静态文件。mogilefs的相关程序是用perl语言编写，元数据存储在关系型数据库中（国内有人用C语言将mogilefs重写的程序叫做FastDFS，后者的元数据是存储在内存中的）..
分类：
其他好文 时间：
2015-06-28 06:32:27
阅读次数：
217
前面两篇文章介绍了淘宝的发展历程和Java时代的变迁：
《淘宝技术这十年》读书笔记 (一).淘宝网技术简介及来源
《淘宝技术这十年》读书笔记 (二).Java时代的脱胎换骨和坚若磐石
马云说过“创新不是为了与对手竞争，而是跟明天竞争”，所以这篇文章讲述淘宝的创新技术TFS和Tair及创新的产品，希望文章对大家有所帮助。...
分类：
Web程序 时间：
2015-05-01 20:00:54
阅读次数：
312
经典论文翻译导读之《Finding a needle in Haystack: Facebook’s photo storage》 【译者预读】面对海量小文件的存储和检索，Google发表了GFS，淘宝开源了TFS，而Facebook又是如何应对千亿级别的图片存储、每秒百...
分类：
Web程序 时间：
2015-04-07 17:54:33
阅读次数：
308
http://blog.163.com/sun_jian_zhang/blog/static/1878040412012512112347454/海量图片的分布式存储及负载均衡研究2012-06-12 11:23:47|分类：默认分类|举报|字号订阅前言针对海量图片给网站带来的访问速度下降、性能压力...
分类：
其他好文 时间：
2015-03-04 22:22:13
阅读次数：
169
