1.选一个自己感兴趣的主题（所有人不能雷同）。 我选择了我们学校的新闻网来爬取数据，主要是通过获取文本然后结巴来分析 2.用python 编写爬虫程序，从网络上爬取相关主题的数据。 打开广州商学院的网址进入到校园的新闻网。然后通过对每一页的来获取信息。 3.对爬了的数据进行文本分析，生成词云。 首先 ...
分类：
其他好文 时间：
2018-04-27 02:40:40
阅读次数：
267
1.选一个自己感兴趣的主题或网站。(所有同学不能雷同) 我选了附近松田学校的校园网来爬取 2.用python 编写爬虫程序，从网络上爬取相关主题的数据。 # -*- coding: utf-8 -*- import requests from bs4 import BeautifulSoup as ...
分类：
其他好文 时间：
2018-04-24 21:51:36
阅读次数：
202
1.选一个自己感兴趣的主题或网站。(所有同学不能雷同) 源地址：http://www.18ladys.com/ 2.用python 编写爬虫程序，从网络上爬取相关主题的数据。 3.对爬了的数据进行文本分析，生成词云。 图3-1 爬虫小程序的词云 4.对文本分析结果进行解释说明。 因为爬取的是各个中药 ...
分类：
编程语言 时间：
2018-04-24 20:22:36
阅读次数：
635
Studio 爬虫 文本分词 化词云个性化设计 分析步骤 setwd() install.packages("rjava") install.packages("wordcound") install.packages("wordcound2") library(rjava) library(wor ...
分类：
其他好文 时间：
2018-04-24 14:50:25
阅读次数：
172
用python 编写爬虫程序，从网络上爬取相关主题的数据 对爬了的数据进行文本分析，生成词云 ...
分类：
其他好文 时间：
2018-04-24 14:47:27
阅读次数：
156
1.选一个自己感兴趣的主题或网站。(所有同学不能雷同) 2.用python 编写爬虫程序，从网络上爬取相关主题的数据。 3.对爬了的数据进行文本分析，生成词云。 4.对文本分析结果进行解释说明。 通过使用第三方的jieba库进行中文分词，其中有过多新闻正文内容包含视频链接，所以通过设计了停用词，去掉 ...
分类：
其他好文 时间：
2018-04-23 00:09:24
阅读次数：
228
首先定义获取总页面、获取页面所有链接、获取页面信息、生成词云等的函数，过程中就是获取所有页面所有链接出现点问题，归结于找标签问题。这次爬取的是一个电影网站，将网站里面的电影名、主演、年代、地区，然后进行词云生成 ...
分类：
其他好文 时间：
2018-04-22 21:50:55
阅读次数：
211
最近听到一首很喜欢的歌，许薇的《我以为》，评论也很有趣，遂有想爬取该歌曲下的所有评论并用词云工具展示。 我们使用chrome开发者工具，发现歌曲的评论都隐藏在以 R_SO_4 开头的 XHR 文件中 接下来思路就很明确，拿到该文件，解析该文件的 json 数据，拿到全部评论。 我们可以看到该文件有两 ...
分类：
其他好文 时间：
2018-04-22 12:56:45
阅读次数：
277
利用python对豆瓣电影评价的爬取，并生成词云 一、抓取网页数据 第一步要对网页进行访问，python中使用的是urllib库。代码如下： 第二步，需要对得到的html代码进行解析，得到里面提取我们需要的数据。 在python中使用BeautifulSoup库进行html代码的解析。 Beauti ...
分类：
编程语言 时间：
2018-04-22 12:50:53
阅读次数：
511
