一、环境 1. 本机Mac,设置服务器ip的名称。 增加服务器ip 和 名称的映射关系: 120.xx.xxx.145 hadoop000 方便记忆 利用ssh登陆服务器: 2. Linux上,设置服务器内网ip和服务器名称的映射 「使用阿里云,搭建Hadoop时候应该用内网ip」 同样在/etc/ ...
分类:
其他好文 时间:
2019-09-06 01:33:08
阅读次数:
89
推荐系统遇上深度学习(十)--GBDT+LR融合方案实战 0.8012018.05.19 16:17:18字数 2068阅读 22568 0.8012018.05.19 16:17:18字数 2068阅读 22568 推荐系统遇上深度学习系列:推荐系统遇上深度学习(一)--FM模型理论和实践:htt ...
分类:
其他好文 时间:
2019-09-04 19:11:12
阅读次数:
151
JDK安装 设置hostname 设置机器hosts 创建jdk目录 上传jdk包 打开winSCP工具,通过winscp工具上传java jdk到linux 的/opt/soft文件夹下 解压jdk 将jdk文件解压到module文件夹下,命令如下: 设置jdk的环境变量 在文件末尾添加jdk的环 ...
分类:
系统相关 时间:
2019-09-02 23:54:16
阅读次数:
198
--查询数据库中包含某字段的所有表名 --objName表名 根据xtpe='u'这个是查询表名 use BigData_ODS GO select object_name(id) objName,Name as 列名 from syscolumns where (name like'字段名') a ...
分类:
数据库 时间:
2019-08-20 20:14:43
阅读次数:
109
Bigdata: 结构化数据:有严格约束 半结构化数据: 非结构化数据:没有元数据 搜索引擎:搜索组件+索引组件(存放数据 由蜘蛛程序爬取而来) 2003年 Google发表第一篇论文 The Google File System 解决大量数据存储 GFS文件系统 系统阐述了采取商业计算机集群就是普 ...
分类:
其他好文 时间:
2019-08-17 19:49:38
阅读次数:
99
基于Hadoop的商品推荐系统 基于特征:基于行为:具有了一定的历史特征。 基于用户: 基于商品: 推荐结果=用户的购买向量*物品的相似度矩阵 物品的相似度:物品的共现次数 1.项目名:GRMS2.添加Maven依赖:pom.xml3.创建包:com.briup.bigdata.project.gr ...
分类:
其他好文 时间:
2019-08-10 23:10:24
阅读次数:
187
HBase搭建 Fully distributed 1、搭建方式说明 2、搭建步骤 1、将集群中的所有节点的hosts文件配置完成 2、将集群中的所有节点的防火墙关闭 3、将集群中的所有节点的时间设置一致 4、将所有的节点设置免密钥登陆 5、解压hbase安装包 6、在/etc/profile文件中 ...
分类:
其他好文 时间:
2019-08-03 10:46:20
阅读次数:
73
本文的目的是希望给所有大数据初学者规划一条比较清晰的学习路线,帮助它们开启大数据学习之旅。鉴于大数据领域内的技术绚丽繁复,每位大数据初学者都应该根据自己的实际情况制定专属的学习路径。要说当下IT行业什么最火?ABC无出其右。所谓ABC者,AI+BigData+Cloud也,即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行,今天我们来讨论下大数据这个方向。新手入门大数据,这有
分类:
其他好文 时间:
2019-07-21 10:19:58
阅读次数:
131
packagecom.weshare.bigdata;importorg.apache.hadoop.hbase.Cell;importorg.apache.hadoop.hbase.HBaseConfiguration;importorg.apache.hadoop.hbase.TableName;importorg.apache.hadoop.hbase.client.*;importorg.
分类:
编程语言 时间:
2019-07-03 12:12:21
阅读次数:
171