小月月是个懒家伙,博客更新好慢...前几天拿到某公司的面试题,要求在Linux/Ubuntu/Debian/Suse/Centos下用python2.7开发一个爬虫,抓取百度新闻搜索结果的前三页标题+url。这可把对python一窍不通的小月月难住了,肿么办呢...哦,最简单有效直接的方法就是网上查...
分类:
编程语言 时间:
2014-05-07 17:11:38
阅读次数:
457
scp
把本地文件上传到服务器上
scp -P 1234 config/cert/dev/client.pem dev@xx.xxx.xxx:/srv/rorapps/fgcc/config/cert/production
svn VS git
svn
svn checkout server_url
svn status
svn diff **file
svn...
分类:
其他好文 时间:
2014-05-07 15:54:44
阅读次数:
305
现分公司的一个车间要出租给外加工单位,是我们boss的朋友,所以网络设备什么的都是由我们提供,大概车间办公室10+电脑左右,我们自己电脑总数在60台,其中能上外网的30+,领导让我去做这个项目,要求如下:1、外租网络不能访问我们内网,可以访问外网2、带宽的问题,我们总带..
分类:
其他好文 时间:
2014-05-07 15:34:34
阅读次数:
562
客户在浏览器输入一个有效的url地址开始,浏览器会利用socket向url对应的web服务器发送一个TCP请求,这个请求成功一次就需要来回握三次手才能确定,成功以后,浏览器利用socket
TCP连接资源向web服务器请求http协议,发送以后就等着Web服务器把Http返回头和Body发送回来,发...
分类:
Web程序 时间:
2014-05-07 14:24:25
阅读次数:
278
众所周知,jsonp可以解决跨域问题,下面是我在查阅资料和实际项目使用后的一些总结。Jquery中jsonp的使用//myUrl
= "http://localhost:8090/api/test";$.ajax({ type:"GET", url:myUrl,
dataType:"jsonp...
分类:
Web程序 时间:
2014-05-07 11:10:16
阅读次数:
362
1. 科普
通用搜索引擎处理的对象是互联网的网页,目前网页的数量数以亿计,所以搜索引擎面临的第一个问题是如何设计出高效的下载系统,已将海量的网页下载到本地,在本地形成互联网网页的镜像。网络爬虫就是担当此大任的。
抓取网页的过程其实和读者平时使用IE浏览器浏览网页的道理是一样的。比如说你在浏...
分类:
编程语言 时间:
2014-05-07 02:41:56
阅读次数:
368
在用javascript对URL字符串进行编码
中,虽然escape()、encodeURI()、encodeURIComponent()三种方法都能对一些影响URL完整性的特殊字符进行过滤。
但后两者是将字符串转换为UTF-8的方式来传输,解决了页面编码不一至导致的乱码问题。例如:发送页与接受页的...
分类:
其他好文 时间:
2014-05-07 02:05:22
阅读次数:
614
1.首先下载JDK通过命令wget可以直接从linux下载 命令wget
URL地址2解压hadoop1.1.2.tar.gz3在grid用户目录下创建免密码通过ls
-a显示隐藏目录.ssh4实现免密码,只需要将公钥复制到另一台机的,并且另取名为authorized_keys
分类:
其他好文 时间:
2014-05-07 01:54:57
阅读次数:
258
启用分组模块非常简单,配置下APP_GROUP_LIST参数和DEFAULT_GROUP参数即可。
'APP_GROUP_LIST'=>'Admin,Home',
'DEFAULT_GROUP'=>'Home',将Home设为默认的项目。
在我们启用项目分组之前,由于使用的两个项目,所以URL地址分别是:
http://serverName/index.php/Index/...
分类:
Web程序 时间:
2014-05-06 22:39:00
阅读次数:
520
这是 data.chatFileModelJson = [dic valueForKey:@"Text"];时的数据
{
Content = "s\U5de5\U56fd\U4e2d\U53e5\U53f7\U4e2d\U56fdd";
FileKey = "";
Url = "http://m.im2x.com/d";
}
想要不转码的string j...
分类:
Web程序 时间:
2014-05-06 21:05:26
阅读次数:
384