php+php 所需扩展库 交叉编译 安装依赖： libxml2： 1. wget ftp://xmlsoft.org/libxml2/libxml2-2.7.2.tar.gz 2. tar xvf libxml2-2.7.2.tar.gz 3. cd libxml2-2.7.2 4. ./conf ...
分类：
Web程序 时间：
2020-11-17 12:31:59
阅读次数：
21
1、大数据有哪些特点？ valume(大量） velocity（高速） variety（多样） value（低价值密度） 2、什么是大数据？ 指无法在一定的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信 ...
分类：
其他好文 时间：
2020-11-16 13:51:20
阅读次数：
9
1.环境的安装与准备 参考下图： 2.数据库服务的安装与添加（HADOOP，HDFS，HIVE） 如下图所示： 3.华为官网的文档的指导手册（HADOOP，HDFS，HIVE） FusionInsight HD 6.5.1 应用开发指南 03 https://support.huawei.com/e ...
分类：
数据库 时间：
2020-11-13 12:11:51
阅读次数：
18
第六周1、自建yum仓库，分别为网络源和本地源（1）vim/etc/yum.repos.d/base.repo(2)yumrepolist2、编译安装http2.4，实现可以正常访问，并将编译步骤和结果提交。（1）下载源码wgethttp://archive.apache.org/dist/httpd/httpd-2.4.25.tar.gz（2）解包及准备所需安装包tarxvfhttpd-2.4.
分类：
其他好文 时间：
2020-11-12 13:46:18
阅读次数：
8
本周因为一些原因实际开发时间过于零散，因而开发报告未按每日进行总结 但是本周进展也说不上多，这点不太好 花在学习上：20小时 花在代码上：15小时 花在解决问题上：9小时 本周遇到的问题：Hadoop可以正常启动 但是Namenode无法通过浏览器访问(连接被拒绝)，离谱的是Secondary Na ...
分类：
其他好文 时间：
2020-11-12 13:43:39
阅读次数：
7
linux系统下时常会需要安装或升级更新各种应用包，安装方式多样化，如果存在编译安装会更灵活自由选择扩展，方便达到应用目标，当然如果没有特殊要求还是不建议使用编译安装，毕竟安装时间长失败率高。目前主要安装升级方式安装包管理器比如：yum、apt优点：安装快速方便，成功率高缺点：安装选项固定，安装可选版本不多，很少安装最新版应用容器镜像比如：docker优点：安装方便，成功率高，可安装各种版本、方便
分类：
系统相关 时间：
2020-11-12 13:40:00
阅读次数：
13
本周主要是制作了河北重大技术需求分析的数据录入板块，通过这个主要是练习了前端的制作，例如通过js以及json数据进行多级联动，还有一些特殊条件的查询等等。另外就是软件需求的分析，对于客户提出的要求我们作为软件的设计者以现有技术为根基来进行设计，设计出尽可能合理的系统，并针对其中的诸多细节与客户进行交 ...
分类：
其他好文 时间：
2020-11-12 13:30:08
阅读次数：
9
Hadoopnamenode高可用性分析：QJM核心源代码解读背景介绍HDFSnamenode在接受写操作时会记录日志，最早HDFS日志写本地，每次重启或出现故障后重启，通过本地镜像文件＋操作日志，就能还原到宕机之前的状态，不会出现数据不一致。如果要做高可用(HA)，日志写在单个机器上，这个机器磁盘出现问题，重启就恢复不了，导致数据不一致，出现的现象就是新建的文件不存在，删除成功的还在等诡异现象。
分类：
其他好文 时间：
2020-11-07 17:00:30
阅读次数：
24
1.词频统计 a.下载喜欢的电子书或大量文本数据，并保存在本地文本文件中 b.编写map与reduce函数 c.本地测试map和reduce d.将文本数据上传到HDFS上 e.用hadoop streaming提交任务 f.查看运行结果 g.计算结果取回本地 ...
分类：
其他好文 时间：
2020-11-07 16:36:45
阅读次数：
33
1.下载喜欢的电子书或大量文本数据，并保存在本地文件夹中 2.编写map与reduce函数 3.本地测试map与reduce 4.将文本数据上传至HDFS上 5.用hadoop streaming提交任务 6.查看运行结果 7.计算结果取回到本地 ...
分类：
其他好文 时间：
2020-11-07 16:32:22
阅读次数：
17
