前言本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。作者:haoxuan10 本节中,我们以今日头条为例来尝试通过分析Ajax请求来抓取网页数据的方法。这次要抓取的目标是今日头条的街拍美图,抓取完成之后,将每组图片分文件夹下载到本 ...
分类:
编程语言 时间:
2019-12-10 15:20:30
阅读次数:
103
macrotask(宏任务):主代码块、setTimeout、setInterval等 microtask(微任务):Promise、process.nextTick等 下面通过【今日头条】这道面试题详细说明一下: 先画一个通用任务表(后面的步骤就是给表插值的过程,执行顺序是从上至下,从左往右,先同 ...
分类:
系统相关 时间:
2019-12-03 21:54:42
阅读次数:
86
一、数据分析能做什么,简单举几个例子: 1、淘宝可以观察用户的购买记录、搜索记录以及人们在社交媒体上发布的内容选择商品推荐 2、股票可以根据相应的数据选择买进卖出 3、今日头条可以将数据分析应用到新闻推送排行算法当中 4、爱奇艺可以为用户提供个性化电影推荐服务 二、python常用库 Numpy N ...
分类:
编程语言 时间:
2019-12-02 17:01:08
阅读次数:
102
自定义过渡的类名 另一种情况和Vue过渡执行过程见初始渲染 new Vue({ el: '#app-2', data: { taxiCalled: false } }) <style> .slideInRight { transform: translateX(300px); } .go { tra ...
分类:
其他好文 时间:
2019-12-01 20:41:36
阅读次数:
94
最近找工作,爬虫面试的一个面试题。涉及的反爬还是比较全面的,结果公司要求高,要解决视频链接时效性问题,凉凉。 直接上代码 import requests import time from datetime import datetime import json import execjs impor ...
分类:
其他好文 时间:
2019-11-25 11:26:47
阅读次数:
55
题目:爬取今日头条新闻网的左边侧栏,并且以csv为文件的形式保存 代码: import io import sys import urllib.request import pandas as pd from pyquery import PyQuery as pq sys.stdout = io. ...
分类:
其他好文 时间:
2019-11-23 21:48:50
阅读次数:
55
业务背景今日头条的服务大量使用微服务,容器数目巨大,业务线繁多,Topic的数量也非常多。另外,使用的语言比较繁杂,包括Python,Go,C++,Java,JS等,对于基础组件的接入,维护SDK的成本很高。引入RocketMQ之前采用的消息队列是NSQ和kafka,NSQ是纯内存的消息队列,缺少消息的持久性,不落盘直接写到Golang的channel里,在并发量高的时候CPU利用率非常高,其优点
分类:
其他好文 时间:
2019-11-15 20:26:28
阅读次数:
60
本人3年开发经验、18年年底开始跑路找工作,在互联网寒冬下成功拿到阿里巴巴、今日头条、翔通动漫等公司offer,岗位是Java后端开发,最终选择去了翔通动漫。 面试了很多家公司,感觉大部分公司考察的点都差不多,所以将自己的心得记下来,希望能给正在找或者准备找工作的朋友提供一点帮助。另外,目前在翔通动 ...
分类:
编程语言 时间:
2019-11-14 15:22:36
阅读次数:
93
本人3年开发经验、18年年底开始跑路找工作,在互联网寒冬下成功拿到阿里巴巴、今日头条、第一视频等公司offer,岗位是Java后端开发,最终选择去了第一视频。 面试了很多家公司,感觉大部分公司考察的点都差不多,所以将自己的心得记下来,希望能给正在找或者准备找工作的朋友提供一点帮助。另外,目前在第一视 ...
分类:
编程语言 时间:
2019-11-14 15:21:36
阅读次数:
103
本人3年开发经验、18年年底开始跑路找工作,在互联网寒冬下成功拿到阿里巴巴、今日头条、创蓝253等公司offer,岗位是Java后端开发,最终选择去了创蓝253。 面试了很多家公司,感觉大部分公司考察的点都差不多,所以将自己的心得记下来,希望能给正在找或者准备找工作的朋友提供一点帮助。另外,目前在创 ...
分类:
编程语言 时间:
2019-11-14 15:20:08
阅读次数:
94