import requests import json from dateutil.parser import parse import time headers = { 'User-Agent':'Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS... ...
分类:
其他好文 时间:
2018-01-08 13:34:29
阅读次数:
179
保存微博用户之间的关系:importredis
classRelatoinShip(object):
"""使用无序集合键保存用户关系"""
def__init__(self,client):
self.client=client
deffollow(self,fans,target):
"""关注某人"""
#将用户添加到目标用户粉丝集合中
target_fans_set="weibo::user::"+str(ta..
分类:
其他好文 时间:
2017-09-05 00:29:18
阅读次数:
127
业务 编辑 中国互联网已经全面进入微博时代!新浪与腾讯微博的注册用户总 数已经突破3亿,日登陆数超过了4000万。同时,微博用户群又是中国互联网使用的高端人群,这部分用户群虽然只占中国互联网用户群的10%,但他们是城市中对新鲜事物最敏感的人群,也是中国互联网上购买力最高的人群。 理念 编辑 理念 企 ...
分类:
其他好文 时间:
2017-07-08 11:21:51
阅读次数:
201
一、环境搭建1、Hadoop运行环境搭建1.1安装虚拟机(1)下载并安装VMware虚拟机软件。(2)创建虚拟机,实验环境虚拟机配置如下图所示。(3)安装Ubuntu系统,安装结果如下图所示。1.2配置JDK环境下载并安装JDK,安装结束后需对java环境进行配置,配置成功结果如下所示。2、Hado..
分类:
其他好文 时间:
2017-06-02 17:37:11
阅读次数:
313
开始抓取微博数据的时候,只是想获得一条热门微博下的所有评论,因为里面有不少图片广告,所以想试试能不能分析出热门微博评论里的异常用户。 使用PHP的Laravel框架后,通过队列、命令等各种功能,最后构架了一套完整的微博用户数据抓取平台,经过一段时间的运行积累了大量数据,那么使用这些数据能做什么呢? ...
分类:
Web程序 时间:
2017-04-04 23:19:31
阅读次数:
244
相信很多人都试过这样的经历,浏览一个正常的网站时,右下突然角弹出一堆小广告,而且这些广告的内容和你浏览的网站格格不入: 前几天还有某微博用户爆料访问github时居然也有广告: 又或者,你有没有试过因为不小心输错了某个网站的网址,出来一堆不堪入目的广告内容? 我今天还特意在家里试了一把,故意输入一个 ...
分类:
Web程序 时间:
2016-07-21 21:58:41
阅读次数:
254
前言:这些天在研究如何调用新浪开放平台的api分析新浪微博用户的数据 成果:成功调用了新浪api获取了用户的一些个人信息和无数条公共微博 不足:新浪开放平台访问有限制,返回的数据着实有限,不足以分析问题,真的要分析问题还是得个人写爬虫 下面是调用新浪开放api的过程: 第一步:按这个做就行 http ...
分类:
编程语言 时间:
2016-07-12 10:24:57
阅读次数:
238
截止2014年统计,腾讯用户有8亿,微博用户2.5亿。两大社交平台每天产生上亿的消息数据。这些海量数据足以分析出网民对事物的宏观看法,整体诉求,进而推导出事物的发展趋势。具有非常大的辅助决策、分析利用价值。 ...
分类:
其他好文 时间:
2016-06-25 16:22:17
阅读次数:
2241
(一)、微博功能概况 微博用户账号注册 微博用户登录 微博发布 添加微博好友(粉丝) 微博推送 微博冷数据写入mysql数据库 (二)、redis数据结构设计 这节分享微博用户注册与登录:我们完全采用redis作为数据库来实现注册于登录先来看一下redis数据结构的设计: 注册用户表:user se ...
分类:
Web程序 时间:
2016-06-07 20:39:14
阅读次数:
215
根据目前公司现有资源以及下半年发展规划,以XX网站、微信、微博为基础制定此次运营推广计划,旨在增加XX网站、微信、微博用户,抢占网络市场,增加各资源曝光率,并使得XX网站、微信、微博可以相互扶持共同进步,力争早日达到预期效果。...
分类:
Web程序 时间:
2016-05-12 14:27:12
阅读次数:
236