码迷,mamicode.com
首页 >  
搜索关键字:百度贴吧 爬虫 python    ( 140645个结果
社会化海量数据采集爬虫框架搭建
如果你对项目管理、系统架构有兴趣,请加微信订阅号“softjg”,加入这个PM、架构师的大家庭 随着BIG DATA大数据概念逐渐升温,如何搭建一个能够采集海量数据的架构体系摆在大家眼前。如何能够做到所见即所得的无阻拦式采集、如何快速把不规则页面结构化并存储、如何满足越来越多的数据采集还要在有限时间...
分类:其他好文   时间:2014-05-12 17:06:14    阅读次数:396
python报错 IndentationError: unindent does not match any outer indentation level
这个是缩进问题,重新将行前面的空格删掉,换位tab
分类:编程语言   时间:2014-05-12 16:35:23    阅读次数:383
python 元组和字典中元素作为函数调用参数传递
模式1.def test1(*args): test3(*args)def test2(**kargs): test3(**kargs)def test3(a, b): print(a,b)test1(1,2)test2(a=1,b=2)模式2.def test4(a= ()): ...
分类:编程语言   时间:2014-05-12 16:31:15    阅读次数:520
python 求10亿以内和987654互质正整数的和
加群看见的但是计算好慢,谁有更优的算法,麻烦说一下。factor=[]for x in xrange(1, 987654//2+1): if 987654%x==0: factor.append(x)sum=0for y in xrange(1, 1000000000): ...
分类:编程语言   时间:2014-05-06 00:37:50    阅读次数:851
名字空间和异常
那年是787年!公元?——Monty Python任何规则都不可能如此一般,以至不能容许任何例外(异常)。——Bobert Burton1、模块化和界面 任何实际程序都是由一些部分组成的。例如,最简单的“ Hello, world! ”程序也涉及到至少两部分:用户代码要求将Hello, world....
分类:其他好文   时间:2014-05-06 00:19:04    阅读次数:382
精通phthon的条件
1. 熟知主流硬件体系(x86, x64)2. 熟知 CPython 的具体实现,如若可能至少通读源码三遍以上3. 熟知每条 Python bytecode 如何被解释执行4. 熟知每条 Python 语句如何 compile 成 bytecode5. 熟知 Python 主要数据结构所采用的优化手...
分类:其他好文   时间:2014-05-06 00:18:16    阅读次数:306
运维的我要学开发--Python(4)
本文均来自PythonCookbook,本博文励志将Cookbook中的string部位,文件,面向对象编程部分完成,本系列博文陆续还会介绍flask框架,每篇博文都以一个个小例子展示。#-*-coding:utf-8-*- ‘‘‘ 文件相关的操作: read() open() 两个参数: 第一个:文件路径 第二个:打开文件的模式 常..
分类:编程语言   时间:2014-05-03 02:00:18    阅读次数:417
基于Ansible实现批量管理
基于Ansible实现批量管理Ansible提供一种最简单的方式用于发布、管理和编排计算机系统的工具,可在数分钟内搞定,Ansible本身是一种python程序,只需要配置一个节点,只要ssh连接ok被控制节点不需要安装任何工具,就可以实现远程连接执行任何操作支持多节点发布、远程任务执行..
分类:其他好文   时间:2014-05-03 01:38:43    阅读次数:595
运维的我要学开发--Python(3)
本文均来自PythonCookbook,本博文励志将Cookbook中的string部位,文件,面向对象编程部分完成,本系列博文陆续还会介绍flask框架,每篇博文都以一个个小例子展示。#-*-coding:utf-8-*- ‘‘‘ 检查一个文本是字符串还是二进制 思想:如果字符串中包含了空值或者其中含有超过30%的..
分类:编程语言   时间:2014-05-03 00:55:27    阅读次数:375
Python 2.7安装setuptools时的UnicodeDecodeError解决办法
我猜~~~很多一开始学习python的同学们一定也遇到了这个问题,在安装setuptools时候会遇到UnicodeDecodeError的错误。我学的是3.x,但是周围的人都说2.7好,╮(╯▽╰)╭一开始我也不在乎,但是工作需要使用mongodb,但是它的包暂时只有2.7,我点点点点。无奈我也就...
分类:编程语言   时间:2014-05-02 16:24:03    阅读次数:410
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!