码迷,mamicode.com
首页 >  
搜索关键字:beautifulsoup    ( 1186个结果
大学排名
import requests import pandas as pd import numpy as np from bs4 import BeautifulSoup import sqlite3 allUniv=[] def getHTMLText(url): try: r=requests.g ...
分类:其他好文   时间:2020-05-23 10:01:03    阅读次数:60
广东省大学排名
import requests from bs4 import BeautifulSoup allUniv=[] def getHTMLText(url): try: r=requests.get(url,timeout=30) r.raise_for_status() r.encoding = ' ...
分类:其他好文   时间:2020-05-23 09:57:50    阅读次数:495
广东技术师范大学
import requests from bs4 import BeautifulSoup allUniv=[] def getHTMLText(url): try: r=requests.get(url,timeout=30) r.raise_for_status() r.encoding = ' ...
分类:其他好文   时间:2020-05-23 09:18:05    阅读次数:480
Web_Scraping Techniques
web_scraping_package.py from bs4 import BeautifulSoup import requests session = requests.Session() headers = { 'User-agent': 'Mozilla/5.0 (Windows NT ...
分类:Windows程序   时间:2020-05-22 19:35:17    阅读次数:74
设计自己的大学排名
查询广东技术师范大学2018年最好大学排名以及科研质量。 import requests from bs4 import BeautifulSoup allUniv=[] def getHTMLText(url): try: r=requests.get(url,timeout=30) r.rais ...
分类:其他好文   时间:2020-05-21 00:16:47    阅读次数:110
Python-网易音乐下载
# 爬取网易音乐 import requests from bs4 import BeautifulSoup import urllib.request headers = {"origin": "https://music.163.com", "referer": "https://music.1 ...
分类:编程语言   时间:2020-05-19 18:40:16    阅读次数:107
20,爬取豆瓣电影TOP250,教程为BiliBili IT私塾
耗时两天,终于将李巍老师的爬虫部分学习完,非常感谢李老师,讲课很生动,课程来源bilibili UP主:IT私塾. 以下为源代码: #-*- codeing= utf-8 -*-#__author__: zoe#date: 2020/5/15from bs4 import BeautifulSoup ...
分类:其他好文   时间:2020-05-18 12:11:07    阅读次数:130
第一次爬虫和测试
一、requests库的get()函数访问必应主页20次,打印返回状态,text()内容,计算text()属性和content属性所返回网页内容的长度。 1>返回状态。 import requests from bs4 import BeautifulSoup def JudgeState(r): ...
分类:其他好文   时间:2020-05-17 19:24:12    阅读次数:89
Python第一条网络爬虫,爬取一个网页的内容
一、球赛结果预测代码部分函数测试。 二、用requests库函数访问搜狗网页20次。 1 import requests 2 from bs4 import BeautifulSoup 3 def getHTMLText(self): 4 try: 5 r=requests.get(url,time ...
分类:编程语言   时间:2020-05-13 23:42:42    阅读次数:142
python-爬取中国大学排名网站信息【IndexError:list index out of range】
代码1、2如下 #方法一import requests from bs4 import BeautifulSoup #对bs4库中的Beautiful类引用 allUniv = []#获取界面的信息 def getHTMLText(url): try: r = requests.get(url, t ...
分类:编程语言   时间:2020-05-13 23:30:18    阅读次数:120
1186条   上一页 1 ... 6 7 8 9 10 ... 119 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!