从去年10月份入职毕业后第一份工作开始,就给自己定了两个目标:完成一个功能相对完整、丰富的电商网站和一个类似qq的OA聊天工具(看看,我现在连它应该怎么称呼都不知道了。。。) 因为本身不是计算机专业出身,想着通过这两个项目能让自己的底子能更扎实些。。。。现在的工作太安逸太安逸太安逸。。。。前一年全身 ...
分类:
其他好文 时间:
2016-05-05 14:39:33
阅读次数:
131
代码如下:packagecom.dt.spark.streaming
importorg.apache.spark.sql.SQLContext
importorg.apache.spark.{SparkContext,SparkConf}
importorg.apache.spark.streaming.{StreamingContext,Duration}
/**
*使用SparkStreaming结合SparkSQL对日志进行分析。
*假设电商网站点..
分类:
数据库 时间:
2016-05-05 07:09:52
阅读次数:
346
从移动互联网市场总监岗位出发,从几个方面来阐述移动互联网部门如何制定一份运营推广策划案,至于关于移动互联网,移动电商是大趋势这些虚的、空泛的文字,不展开说了。 一、竞品分析 1.选择竞品,做好定位(选择两个产品最好,最多三个) 如何获取竞品? A、百度搜索类似产品关键词,假设你的产品是一款三国主题的 ...
分类:
移动开发 时间:
2016-05-04 13:16:48
阅读次数:
346
最近一瓶10元廉价酒变成400元洋河天之蓝事件,因各大主流新闻报道而被坊间热议。事件中,检察院人员发现整个事件中,物流环节存在巨大漏洞,长期利用物流冒以配件、家电之名将大量假酒发向全国的行为背后,是拆包检查的自律公约的失效。同样的行为,也发生在如今野蛮生长的微商..
分类:
其他好文 时间:
2016-05-03 00:42:18
阅读次数:
149
1、用户画像:用户信息标签化。 2、用户画像可以做什么? ——内容正在整理中 3、show命令用法 show tables 显示所有表 例:show table like ‘…_pre_food’; show partitions 显示所有分区 例:show partitions fdm_prd_f ...
分类:
其他好文 时间:
2016-05-02 22:40:55
阅读次数:
260
1、YARN:将资源管理和作业调度/监控分成两个独立的进程。 包含两个组件:ResourceManager和ApplicationMaster 2、YARN的特性: 1)可扩展性;2)高可用性(HA);3)兼容性(1.0版本的作业也可以执行);4)提高集群利用率; 5)支持MapReduce编程范式 ...
分类:
其他好文 时间:
2016-05-02 18:22:33
阅读次数:
224
1、大数据部门:数据中心、数据平台、数据部…… 2、每个部门都有:架构人员、数据分析人员、开发人员、运营人员…… 3、团队:数据仓库组、BI组、架构组、数据专家组…… 4、团队分的更细:需求组、推荐组、情报组、挖掘组、数据组、营销组…… 5、大数据有哪些重要的项目: 1)数据仓库建设; 2)经营分析 ...
分类:
其他好文 时间:
2016-05-02 17:01:56
阅读次数:
232
本期课程内容:在线黑名单过滤实现解析SparkStreaming实现在线黑名单过滤广告计费系统,是电商必不可少的一个功能点。为了防止恶意的广告点击(假设商户A和B同时在某电商做了广告,A和B为竞争对手,那么如果A使用点击机器人进行对B的广告的恶意点击,那么B的广告费用将很快被用..
分类:
其他好文 时间:
2016-05-01 17:56:08
阅读次数:
291
行为型的设计模式 - Oberver(观察者模式) 一般常见的观察者模式如:报纸订阅。 在web应用中的电商最常见的莫过于物流接口,如快递100收费版--主动推送。 出版者+订阅者=观察者 下见2个接口, 1、Subject(主题接口) method: register() --用于注册订阅者 re ...
分类:
其他好文 时间:
2016-04-30 01:00:13
阅读次数:
217
北京时间4月29日,全球最大中文搜索引擎百度公布了截至2016年3月31日第一季度未经审计的财务报告。财报数据显示,第一季度在本地生活服务领域,由百度糯米、百度外卖、百度钱包等共同构成的百度电商化交易总额(GMV)为160亿元,同比增长268%。笔者从百度获悉,作为百度“航母..
分类:
其他好文 时间:
2016-04-29 20:19:31
阅读次数:
153