大型网站的HTTPS实践(二)——HTTPS加密算法介绍 原创 网络通信/物联网 作者:AIOps智能运维 时间:2018-11-09 15:09:43 358 0 大型网站的HTTPS实践(二)——HTTPS加密算法介绍 原创 网络通信/物联网 作者:AIOps智能运维 时间:2018-11-09 ...
分类:
编程语言 时间:
2018-11-15 22:31:29
阅读次数:
236
大型网站的HTTPS实践(一)——HTTPS协议和原理 原创 网络通信/物联网 作者:AIOps智能运维 时间:2018-11-09 15:07:39 349 0 大型网站的HTTPS实践(一)——HTTPS协议和原理 原创 网络通信/物联网 作者:AIOps智能运维 时间:2018-11-09 1 ...
分类:
Web程序 时间:
2018-11-14 20:52:49
阅读次数:
192
分布式系统(distributed system)正变得越来越重要,大型网站几乎都是分布式的。 分布式系统的最大难点,就是各个节点的状态如何同步。CAP 定理是这方面的基本定理,也是理解分布式系统的起点。 本文介绍该定理。它其实很好懂,而且是显而易见的。下面的内容主要参考了 Michael Whit ...
分类:
其他好文 时间:
2018-11-13 10:28:41
阅读次数:
181
“人在江湖飘,哪能不挨刀。”话糙理不糙,在我们酣畅淋漓地使用爬虫抓取数据为我们所用的时候,却也能难免遇到强敌,IP遭到封锁,爬虫被反。那么万一不行,IP被封了,有什么方法来解呢?当然有,还很多。方法1.之前由于公司项目需要,采集过google地图数据,还有一些大型网站数据。经验如下:IP必须有,可以直接使用成熟的代理IP服务商,类似像太阳HTTP代理这种。好处:1.程序逻辑变化小,只需要代理功能。
分类:
其他好文 时间:
2018-11-12 19:51:28
阅读次数:
144
【芝麻HTTP】我们在爬虫的时候经常会出现IP被封的情况,除了大家都知道的使用代理IP,还有什么方法呢?方法一之前由于公司项目需要,采集过google地图数据,还有一些大型网站数据。经验如下:需要大量IP时,可以直接使用成熟的代理IP服务商。芝麻HTTP就是一个很好的选择,更多可到官网咨询http://h.zhimaruanjian.com/好处:1.程序逻辑变化小,只需要代理功能。2.根据对方网
分类:
其他好文 时间:
2018-11-08 18:32:43
阅读次数:
161
【芝麻HTTP】我们在爬虫的时候经常会出现IP被封的情况,除了大家都知道的使用代理IP,还有什么方法呢?方法一之前由于公司项目需要,采集过google地图数据,还有一些大型网站数据。经验如下:需要大量IP时,可以直接使用成熟的代理IP服务商。芝麻HTTP就是一个很好的选择,更多可到官网咨询http://h.zhimaruanjian.com/好处:1.程序逻辑变化小,只需要代理功能。2.根据对方网
分类:
其他好文 时间:
2018-11-08 18:21:06
阅读次数:
244
大型网站为了缓解大量的并发访问,除了在网站实现分布式负载均衡,远远不够。到了数据业务层、数据访问层,如果还是传统的数据结构,或者只是单单靠一台服务器扛,如此多的数据库连接操作,数据库必然会崩溃,数据丢失的话,后果更是不堪设想。这时候,我们会考虑如何减少数据库的联接,一方面采用优秀的代码框架,进行代码的优化,采用优秀的数据缓存技术如:memcached,如果资金丰厚的话,必然会想到假设服务器群,来分
分类:
数据库 时间:
2018-11-08 14:25:34
阅读次数:
213
1.1 常用来提供静态服务的软件 Apache :这是中小型Web服务的主流,Web服务器中的老大哥, Nginx :大型网站Web服务的主流,曾经Web服务器中的初生牛犊,现已长大。 Nginx 的分支 Tengine ( http://tengine.taobao.org/)目前也在飞速发展? ...
分类:
其他好文 时间:
2018-11-08 00:12:38
阅读次数:
259
redis集群与分片(1)-redis服务器集群、客户端分片 下面是来自知乎大神的一段说明,个人觉得非常清晰,就收藏了。 为什么集群? 通常,为了提高网站响应速度,总是把热点数据保存在内存中而不是直接从后端数据库中读取。Redis是一个很好的Cache工具。大型网站应用,热点数据量往往巨大,几十G上 ...
分类:
其他好文 时间:
2018-11-04 14:05:07
阅读次数:
272
建设网站有什么用?不知道如何建设网站?做一个网站需要多少钱?自己不会建站怎么办?自己建了站不懂推广维护怎么办?通通可以过来广州市千旭网络科技有限公司找答案广州市千旭网络科技有限公司,是中国一家开发型的大型高科技公司,千旭集团旗下公司,总部位于重庆市江北区。我们的团队我们注册资金500万我们的团队由具有十多年经验的优秀IT队伍组成,有资深技术项目经理,有高级UI设计师,有高级html5,css3前端
分类:
Web程序 时间:
2018-11-02 20:31:21
阅读次数:
248