最近老大让用Spark做一个ETL项目，搭建了一套只有三个结点Standalone模式的Spark集群做测试，基础数据量大概8000W左右。看了官方文档，Spark确实在Map-Reduce上提升了很多，可是官方明确提出了在Interactive Data方面性能提升最大。但是做ETL的数据之间是平...
分类：
其他好文 时间：
2015-04-24 00:48:02
阅读次数：
142
caffe是deeplearning常见框架，是目前做CNN比较主流的方法，官网参考http://caffe.berkeleyvision.org/（1）caffe简介：caffe有以下几个特点：1 表达：caffe主要有modles+optimizations组成，models解释了深度网络的每一...
分类：
其他好文 时间：
2015-04-24 00:47:46
阅读次数：
655
Tcpcopy简介TCPCopy是一种请求复制（所有基于tcp的packets）工具 ，其功能是复制在线数据包，修改TCP/IP头部信息，发送给测试服务器，达到欺骗测试服务器的TCP 程序的目的，从而为欺骗上层应用打下坚实基础。TCPCopy七大功能1）分布式压力测试工具，利用在线数据，可以测试系统...
分类：
其他好文 时间：
2015-04-24 00:45:46
阅读次数：
223
/*Andyisgoingtoholdaconcertwhilethetimeisnotdecided.EricisafansofAndywhodoesn'twanttomissthisconcert.Andydoesn'tknowEric.HowcanEricgetsthenewswhenAndy...
分类：
其他好文 时间：
2015-04-24 00:45:57
阅读次数：
226
Linux实验一 —— 缓冲区溢出漏洞实验 20122137一、实验描述缓冲区溢出是指程序试图向缓冲区写入超出预分配固定长度...
分类：
其他好文 时间：
2015-04-24 00:46:14
阅读次数：
169
1.典型用户：姓名年龄欢子职业在校土木学院大学生收入无收入，月支出约600元代表的用户在市场上的比例和重要性学校愿意买卖二手书籍的学生群体庞大，使用率高使用这个软件的典型场景1.发布售书信息。2.登录后，查找购书信息。3.查找用书信息，告知他人。使用本软件/服务的环境方便用户在宿舍就可以进行买卖书的...
分类：
其他好文 时间：
2015-04-24 00:44:36
阅读次数：
266
6分析以及监视场景在运行过程中， 可以监视各个服务器的运行情况（DataBase Server、Web Server 等）。监视场景通过添加性能计数器来实现。这一章非常的重要，确定系统瓶颈全靠它了。下面重点讲讲需要添加那些计数器，以及那些计数器代表什么意思。由于Win2000 Professiona...
分类：
其他好文 时间：
2015-04-24 00:46:42
阅读次数：
258
Git是一个开源的分布式版本控制系统，用以有效、高速的处理从很小到非常大的项目版本管理有两种取得 Git 项目仓库的方法。第一种是在现存的目录下，通过导入所有文件来创建新的 Git 仓库。第二种是从已有的 Git 仓库克隆出一个新的镜像仓库来。一．从当前目录初始化 Git init初始化后，在当前....
分类：
其他好文 时间：
2015-04-24 00:44:20
阅读次数：
316
看到UESTC的数据结构专题快要结束了，感觉自己真心浪费了好多时间，没有像鑫航学姐那样叮嘱的一样，紧紧的跟住训练。所以下决心认认真真的开始学习下线段树的知识，以前对于线段树的学习都是一知半解的，就是说，我只知道线段树是用来单点更新和区间查值的，其实，线段树的功能远远不止这些。 先来说下，线段树...
分类：
其他好文 时间：
2015-04-24 00:46:11
阅读次数：
193
使用main(int argc, char *argv[])==main(int argc, char **argv)的基本操作是linux编程的最基本的一步，在windows下也是exe脱离IDE运行的必学技能，程序编译成功后，在cmd下，使用参数输入来运行程序，自己控制程序参数的输入来测试...
分类：
其他好文 时间：
2015-04-24 00:46:11
阅读次数：
154
程序设计时代：这个阶段生产方式是个体劳动，使用的生产工具是机器语言，汇编语言。程序系统时代：这个阶段生产方式是小集团合作生产，使用的生产工具是高级语言，开发方法仍依靠个人技巧，但开始提出结构化方法。软件工程时代：这个阶段生产方式是工程化的生产，使用数据库﹑开发工具﹑开发环境﹑网络﹑分布式﹑面向对象技...
分类：
其他好文 时间：
2015-04-24 00:43:38
阅读次数：
193
软件工程：就是用科学的知识工程和技术原理来定义，开发，维护软件的一门学科。软件工程的目标：付出较低开发成本；达到要求的功能；取得较好的性能；开发的软件易于移植；只需较低的维护费用；能按时完成开发任务，及时交付使用；开发的软件可靠性高。软件工程的内容：研究内容包括开发技术和开发管理两个方面。开发技术主...
分类：
其他好文 时间：
2015-04-24 00:43:11
阅读次数：
249
相信用过Django框架的都不会忘记它强大的Admin功能,Flask-admin是一款能够与Django Admin所媲美的扩展,能够快速创建Web管理界面，实现了用户、文件增删改查等常用功能；也可以通过修改模板文件来定制管理页面.初始化:from flask import Flaskfrom f...
分类：
其他好文 时间：
2015-04-24 00:44:56
阅读次数：
436
TypeScript是JavaScript内建的一个超集，添加了可选的静态类型和面向对象编程，帮助我们开发大型Web应用。Sublime Text是一款代码编辑器，拥有漂亮的用户界面和强大的插件支持，通过Sublime来编写TypeSript可以让我们更加如鱼得水，Sublime支持build功能，...
分类：
其他好文 时间：
2015-04-24 00:45:07
阅读次数：
349
最近在空间上部署了然知，先来普及一下然知是什么东西，知是一款客户关系管理软件，是开源的，用来管理自己的客户，团队等。简单的说就是跟踪客户信息，比如让销售人员来卖一款产品，每次都要和客户沟通，客户就是不想购买，可以采用电话，qq等沟通方式，但是沟通完了之后我要做一下笔记，沟通到什么程度了，下次是否可....
分类：
其他好文 时间：
2015-04-24 00:42:24
阅读次数：
246
今天接着来翻译http://www.wilsonmar.com/中关于LoadRunner脚本编写部分，下面该翻译脚本编写中一些比较重要的部分了。Web用户Action 在VuGen中，脚本产生的默认模式是基于HTML的--“描述用户的动作的脚本”直接与用户的动作是对应的： * web_url是浏览...
分类：
其他好文 时间：
2015-04-24 00:40:42
阅读次数：
144
在把Oracle11g的dmp文件导入到oracle1og时，出现很多意想不到的错误，比如说查询字符串中全角空格的问题；曾经试图，把sqlStr中所有的多余空格，删除，完成一半的时候放弃，因为发现还有十几个需要删除的语句，所以开始研究怎么通过代码来删除多余的空白符。所以就有了，借助正则表达式删除空格...
分类：
其他好文 时间：
2015-04-24 00:40:06
阅读次数：
157
