51job多线程爬取指定职业信息数据 # datetime:2020/10/7 14:02 # 51job多线程 import requests import chardet from bs4 import BeautifulSoup import csv from openpyxl import ...
分类:
编程语言 时间:
2020-10-07 21:39:48
阅读次数:
43
目录 一、选择数据源 三、整体代码实现 4、总结 同时推荐前面作者另外两个系列文章: 很多人学习python,不知道从何学起。很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手。很多已经做案例的人,却不知道如何去学习更加高深的知识。那么针对这三类人,我给大家提供一个好的学习平台,免 ...
分类:
编程语言 时间:
2020-10-05 22:15:34
阅读次数:
44
注意??:CSV文件的生成,只有通过文件软件的另存为csv格式才可生成没有异常的文件,千万不可以直接修改文件后缀名。 #!/usr/bin/env python # -*- coding: utf-8 -*- # @Author : shenqiang import csv '''读取csv文件的方 ...
分类:
其他好文 时间:
2020-09-24 00:02:20
阅读次数:
45
前言 数据中的数据通过csv文件导出后乱码 步骤 我们只需要在导出的时候把编码格式设置为10008 (MAC - Simplified Chinese GB 2312)即可 ...
分类:
其他好文 时间:
2020-09-18 17:26:49
阅读次数:
84
最近在研究螺纹钢与铁矿石的比价变化,所以用python写个代码分析一下。 数据文件: 数据下载自网络。 代码: 中间有些没用的,看官们请忽略,那是我从另一个文件直接复制来的,后面要plt出图的。 今天的文章只讲两个DataFrame如何连接到一起,相当于SQL的left-join ,或者update ...
分类:
编程语言 时间:
2020-09-17 22:54:52
阅读次数:
33
一、DNS server 二、以csv的方式增加 1、定义 选择文件的默认地址是:E:/functions/jmeter/workPlace/data/hostname.csv 但要改成相对地址:data/hostname.csv 因为,移植到linux环境上不用修改,且用“/”表示目录层级(lin ...
分类:
其他好文 时间:
2020-09-17 22:09:16
阅读次数:
26
1 简介 jupyter lab是我迄今为止体验过开展数据分析等任务最舒适的平台,但这不代表它是完美的,因为在很多方面它仍然存在欠缺,譬如在对csv文件的交互式编辑方面。 图1 而本文将要介绍的jupyter lab插件就赋予我们高度的交互式操纵csv文件的自由,无需excel,就可以实现对csv表 ...
分类:
其他好文 时间:
2020-09-17 21:07:25
阅读次数:
29
#!/usr/bin/env python import pandas as pd import os import threading import time import csv def dowork(df_only_name): for index in df_only_name.index: ...
分类:
其他好文 时间:
2020-09-17 16:29:33
阅读次数:
30
一、参数化步骤 1、需要用UTF-8文件制作CSV文件,表头一般是参数名称 2、在raw传入的json数据中,对数据进行参数{{参数名}},键值对也可以{{参数名}} 3、在项目中,运行接口中设置参数化,选中CSV文件 4、在collection中设置场景,选中csv文件 5、并且跑完的接口成功数量 ...
分类:
其他好文 时间:
2020-09-17 13:26:23
阅读次数:
24
主要思路: 1、线程组中添加循环控制器 2、循环控制器下添加配置元件--CSV Data Set Config 3、添加http请求及响应断言 情况1:CSV文件中没有表头,则配置时变量名处需要给各列定义一个变量 由于是json格式参数,所以allow quoted date?: 需要设置为true ...
分类:
其他好文 时间:
2020-09-17 13:24:29
阅读次数:
36