本文介绍了Facebook公司数据分析系统中的RCFile存储结构，该结构集行存储和列存储的优点于一身，在 MapReduce环境下的大规模数据分析中扮演重要角色。Facebook曾在2010 ICDE（IEEE International Conference on Data Engineerin...
分类：
其他好文 时间：
2014-08-10 10:18:00
阅读次数：
315
Spark特别适用于多次操作特定的数据，分mem-only和mem & disk。其中mem-only:效率高，但占用大量的内存，成本很高;mem
& disk:内存用完后，会自动向磁盘迁移，解决了内存不足的问题，却带来了数据的置换的消费。Spark常见的调优工具有nman、Jmeter和Jprofile,以下是Spark调优的一个实例分析：
1、场景：精确客户群
对一个容量为300g的客...
分类：
其他好文 时间：
2014-08-09 23:19:39
阅读次数：
301
从hadoop框架与MapReduce模式中谈海量数据处理前言 几周前，当我最初听到，以致后来初次接触Hadoop与MapReduce这两个东西，我便稍显兴奋，认为它们非常是神奇，而神奇的东西常能勾起我的兴趣，在看过介绍它们的文章或论文之后，认为Hadoop是一项富有趣味和挑战性的技术，且它还牵扯到...
分类：
其他好文 时间：
2014-08-09 18:40:08
阅读次数：
297
自2010年11月首次举办以来，大会云集了国内水平最高的IT架构师、技术总监、项目经理、运维总监/经理、DBA经理、研发工程师等IT技术大牛，由最初的百人规模扩展到现今超千人的技术饕餮盛宴。大会一直受到业界广泛关注与赞誉，是目前华东与华南地区最受欢迎、人气最高的架构师技术交流盛会。本次大会将继续秉承分享IT最佳应用实践的宗旨，以“发现架构之美，实战为王”为主题，邀请国内知名互联网企业的资深架构师和工程师，探讨实下最热门的行业趋势与技术热点，分享架构在企业中的最佳实践。大会关键词：分布式文件系统、大数据、GO...
分类：
其他好文 时间：
2014-08-09 16:02:48
阅读次数：
474
各位网友，大家好，我是陌上花会开，今天这篇文章，我将手把手教大家如何开发一套纯CSS的折角效果。一如往常，我不提供代码下载，但是我可以保证，只要将教程中的代码复制到本地，绝对百分百获得与我演示的效果一样，希望各位明白我的用意。好了，直接开始今天的教程吧。首先，我先给大家演示一下今天实战案例的效果：有...
分类：
Web程序 时间：
2014-08-09 15:52:18
阅读次数：
313
1. Impala架构 Impala是Cloudera在受到Google的Dremel启示下开发的实时交互SQL大数据查询工具，Impala没有再使用缓慢的Hive+MapReduce批处理，而是通过使用与商用并行关系数据库中类似的分布式查询引擎（由Query Planner、Query Coord...
分类：
其他好文 时间：
2014-08-09 15:39:48
阅读次数：
451
需求： 实现请假单的电子审批 1. 支持国际化 2. 支持模型级别的访问记录 here we go: 这里会写一系列的文章，来记录我实战的过程，由于接触django没多久，难免有疏漏之处，望拍砖不要太重。
分类：
其他好文 时间：
2014-08-09 11:29:27
阅读次数：
261
Here I share with you a demo for python map, reduce and filter functional programming that
owned by me(Xiaoqiang).
I assume there are two DB tables, that `file_logs` and `expanded_attrs` which re...
分类：
编程语言 时间：
2014-08-09 04:57:17
阅读次数：
525
各位网友大家好，我是陌上花会开，人称陌陌。今天我带领大家开发一个仿天猫首页图片展示动画特效的案例。一如往常，我既不提供源码给大家，也不提供Demo给大家，只是希望大家能跟着我的讲解，然后将代码一步步复制到本地，本人可以保证，页面上的代码复制到本地，绝对百分百运行，且得到与陌陌一样的运行效果。我这么做...
分类：
Web程序 时间：
2014-08-09 02:33:16
阅读次数：
461
国内第一个《微软下一代网站开发框架：ASP.NETMVC6新特性揭秘》课程微软特邀讲师徐雷！周六晚8点YY预定：http://t.cn/RPKMLGF微软VisualStudio2014即将发布！ASP.NETMVC6有什么新特性？WebAPI3.0有什么新变化？什么是动态编译？什么是原生编译？@微软中国MSDN收起|查看大图|向..
分类：
Web程序 时间：
2014-08-08 18:32:47
阅读次数：
373
