``` //python设计哲学 In [5]: import this The Zen of Python, by Tim Peters Beautiful is better than ugly. Explicit is better than implicit. Simple is bette... ...
分类：
编程语言 时间：
2020-02-22 11:59:58
阅读次数：
75
这篇文章主要介绍了Pythont特殊语法filter,map,reduce,apply使用方法,需要的朋友可以参考下（1）lambda lambda是Python中一个很有用的语法，它允许你快速定义单行最小函数。类似于C语言中的宏，可以用在任何需要函数的地方。 基本语法如下： 函数名 = lambd ...
分类：
编程语言 时间：
2020-02-21 16:09:19
阅读次数：
131
Python爬虫 2019大学排名数据抓取 准备工作 1. 输入：大学排名URL连接 2. 输出：大学排名信息屏幕输出 3. 所需要用到的库：requests，bs4 思路 1. 获取网页信息 2. 提取网页中的内容并放到数据结构中 3. 利用数据结构展示并输出结果 程序设计 1. 定义函数getH ...
分类：
编程语言 时间：
2020-02-20 10:11:36
阅读次数：
92
Python3正则去掉HTML标签 1.引用一段代码 import re html = '<pre class="line mt-10 q-content" accuse="qContent">\ 目的是通过第一次soup.find按class粗略筛选并通过soup.find_all筛选出列表中的a ...
分类：
编程语言 时间：
2020-02-14 18:58:56
阅读次数：
116
一、 信息标记的三种形式【标记+信息】 1、 XML 标签，<> </> 扩展性好，但比较繁琐，标签占据大部分内容 用于Internet上的信息交互和传递 2、 JSON 有类型键值对 key : value，JavaScript面向对象 key，value都需要家双引号：”name”:”呱呱” 适 ...
分类：
其他好文 时间：
2020-02-14 00:52:42
阅读次数：
57
.find_all(name,attrs,recursive,string,**kwargs) name：对标签名称的检索字符串attrs：对标签属性值的检索字符串，可标注属性检索recursive：是否对子孙全部检索，默认为Truestring <>....</>中字符串区域的检索字符串 soup ...
分类：
其他好文 时间：
2020-02-12 00:36:59
阅读次数：
68
今天继续学习webmagic爬虫技术，组件包含： 1.Downloader Downloader负责从互联网上下载页面，以便后续处理。WebMagic默认使用了Apache HttpClient作为下载工具。 2.PageProcessor PageProcessor负责解析页面，抽取有用信息，以及 ...
分类：
其他好文 时间：
2020-02-11 00:30:29
阅读次数：
76
今天主要完成了根据爬取的txt文档，从百度分类从信息科学类爬取百度词条信息，并写入CSV格式文件。 txt格式文件如图： 代码如下： 1 import requests 2 from bs4 import BeautifulSoup 3 import csv 4 import io 5 import ...
分类：
编程语言 时间：
2020-02-10 22:21:12
阅读次数：
87
import requestsimport timefrom bs4 import BeautifulSoupclass getContents(): # 获取html页面 def getHTMLText(self, url): try: kv = {'user-agent': 'Mozilla/5 ...
分类：
其他好文 时间：
2020-02-10 12:03:57
阅读次数：
77
代码可直接复制到python文件中进行运行 # 1. 文件内创建函数 # 内建函数和方法 # open() 打开文件 # read() 输入 # readline() 输入一行 # seek() 文件移动 # write() 输出 # close() 关闭文件 # 写入文件，执行完成后生成txt文件 ...
分类：
编程语言 时间：
2020-02-09 18:33:27
阅读次数：
106
