前言 不知你大规模的用过Redis吗？还是仅仅作为缓存的工具了？在Redis中使用最多的就是集合了，举个例子，如下场景： 签到系统中，一天对应一系列的用户签到记录。电商系统中，一个商品对应一系列的评论。交友系统中，某个用户的一系列的好友。 Redis中集合的特点无非是一个Key对应一系列的数据， 但 ...
分类：
其他好文 时间：
2020-12-08 13:09:21
阅读次数：
18
为什么每一个爬虫工程师都应该学习Kafka摄影：产品经理与产品经理环游世界的瞬间这篇文章不会涉及到Kafka的具体操作，而是告诉你Kafka是什么，以及它能在爬虫开发中扮演什么重要角色。一个简单的需求假设我们需要写一个微博爬虫，老板给的需求如下：开发爬虫对你来说非常简单，于是三下五除二你就把爬虫开发好了：接下来开始做报警功能，逻辑也非常简单：再来看看统计关键词的功能，这个功能背后有一个网页，会实时
分类：
其他好文 时间：
2020-12-08 12:02:43
阅读次数：
2
https://api.weibo.com/oauth2/authorize? client_id=4122644977 &response_type=code &state=study& forcelogin=true& '''redirect_uri=https%3A%2F%2Fstudy.16 ...
分类：
其他好文 时间：
2020-12-05 10:59:14
阅读次数：
8
ServiceMesh是近两年比较火的微服务化新方式，也产生了一大批以Istio为代表的ServiceMesh实现。image.png微博基于实际业务需求，打造并开源了自己的WeiboMesh，并且内部已经在重点业务上进行大规模落地。本文将从如下几个部分为大家详细解读WeiboMesh，希望可以为大家带来服务化方向上的一些灵感，更好的服务于自己的业务：微博服务化挑战服务化新思路WeiboMesh方
分类：
其他好文 时间：
2020-11-20 12:10:29
阅读次数：
9
今天抛一个话题，根据业务现象，一起讨论其后端实现是推还是拉？一、feed流可以理解为一个发布订阅业务，典型业务是微博（朋友圈）。你关注了姚晨的微博，姚晨发布了消息，你的主页能看到她最新发布的消息，这个场景是推送，还是拉取呢？画外音：微博是弱关系，关注无需对方同意，粉丝可以无上限；朋友圈是强关系，好友需要对方同意，好友个数有上线。如果推送，姚晨发布消息的时候，要把消息ID投递到所有粉丝的主页消息队列
分类：
其他好文 时间：
2020-11-18 12:21:07
阅读次数：
4
用最少的机器支撑万亿级访问，微博6年Redis优化历程编者按：本文由刘东辉向高可用架构供稿，基于在5月15日Redis用户交流会上的演讲内容。刘东辉，新浪微博基础架构组研发工程师。2013年加入微博，先后参与微博Redis、CounterService、SSDCache、CacheService等基础组件的设计与开发工作，目前专注于分布式缓存、存储方向。微博是从2010年开始引入Redis，现在R
分类：
其他好文 时间：
2020-11-16 13:07:17
阅读次数：
4
12个行业月均阅读超100亿，看Spark如何助力微博Feed算法提升活跃度#编者按：本文由高可用架构向黄波约稿，介绍黄波在SparkSummitChina2016中的演讲精华，并侧重对微博系统和Feed系统进行了更多的介绍。黄波，2010年加入新浪微博，微博研发中心Feed技术专家，负责微博Feed流排序和推荐相关项目。目前专注于基于Spark、Storm等计算平台的大数据处理，致力于将分布式计
分类：
编程语言 时间：
2020-11-16 13:06:48
阅读次数：
9
1.微博绑定用户接口 1.1 oauth/urls.py 中添加路由 urlpatterns = [ path('weibo/binduser/', views.OauthWeiboBindUser.as_view()), # /oauth/weibo/callback/ ] 1.2 oauth/v ...
分类：
其他好文 时间：
2020-11-12 13:56:22
阅读次数：
5
1.vue微博回调空页面 注：微博回调空页面为： http://127.0.0.1:8888/oauth/callback/ 1.1 页面路径 components\oauth.vue <template> <div> <p>跳转中....</p> </div> </template> <scrip ...
分类：
其他好文 时间：
2020-11-12 13:31:50
阅读次数：
7
在Vue页面加载时动态发送请求获取微博授权url 1.1在components\common\lad_header.vue中写oauth动态获取微博授权URL // 获取微博登录地址 oauth_post().then((resp) => { consloe.log(resp) // {"code" ...
分类：
Web程序 时间：
2020-11-12 13:22:09
阅读次数：
11
