通过爬虫采集工商数据，通过地址转换成坐标位置，并在地图上展示出来，大数据系统 手机支持上传公司信息 方便业务员查看附近客户，拜访客户，扫街，陌拜，记录客户信息 1.首页 2.全城企业分布 3. 3.手机展示 浏览地址：http://map.lywenkai.cn 需要登录或购买平台，请致电：1711 ...
分类：
移动开发 时间：
2019-10-01 11:24:45
阅读次数：
271
前言 Apache Flink（下简称Flink）项目是大数据处理领域最近冉冉升起的一颗新星，其不同于其他大数据项目的诸多特性吸引了越来越多人的关注。本文将深入分析Flink的一些关键技术与特性，希望能够帮助读者对Flink有更加深入的了解，对其他大数据系统开发者也能有所裨益。本文假设读者已对Map ...
分类：
其他好文 时间：
2019-09-16 00:08:39
阅读次数：
81
ajax Asynchronous JavaScript and XML（异步JavaScript和XML) 节省用户操作，时间，提高用户体验，减少数据请求 传输获取数据 ajax优点 不需要插件支持（一般浏览器且默认开启 JavaScript 即可） 用户体验极佳（不刷新页面即可获取可更新的数据） ...
分类：
Web程序 时间：
2019-09-11 23:53:41
阅读次数：
156
磁盘管理 1、df 查看磁盘分区使用状况 l：仅显示本地磁盘（默认） a：显示所有文件系统的磁盘使用情况，包含比如/proc/ h：以1024进制计算最合适的单位显示磁盘容量 H：以1000进制计算最合适的单位显示磁盘容量 T：显示磁盘分区类型 t：显示指定类型文件系统的磁盘分区 x：不显示指定类型 ...
分类：
系统相关 时间：
2019-09-10 12:57:28
阅读次数：
91
在项目中为什么要使用消息队列消息队列使用场景主要有三个：解耦，异步，削峰1、解耦如上图所示，可能存在某一个系统产生关键数据，所有系统都需要其进行提供数据，导致A系统与要提供数据系统产生耦合，系统拓展，其他系统的需求修改都会导致A系统产生修改。2、异步如果用户一个点击，需要几个系统间的一系列反应，同时每一个系统肯都存在一定的耗时，那么可以使用mq对不同的系统进行发送命令，进行异步操作。3、削峰主要是
分类：
其他好文 时间：
2019-09-06 14:37:49
阅读次数：
89
一、背景 1.1文件组织架构 首先看一下mysql数据系统涉及到的文件组织架构，如下图所示： msyql文件组织架构图 从图看出： 1、日志文件：slow.log(慢日志)，error.log(错误日志)，general.log(基本日志) 2、配置文件：my.cnf 3、数据库：performan ...
分类：
数据库 时间：
2019-09-05 17:02:05
阅读次数：
123
saltstack主要有两种数据系统：GrainsPillar一、数据系统-Grains1.1、Grains简介1）当minion启动后会收集自身的状态信息即grains信息，grains信息是静态的，存储在minion端，如操作系统版本，内核版本，CPU，内存，硬盘，设备型号等。这些信息可以作为m... ...
分类：
其他好文 时间：
2019-08-31 01:21:01
阅读次数：
155
一、当天完成的工作 1、下载墨刀软件，并掌握其使用方法。 2、通过分析和讨论，确定了高速公路收费系统的初步设计思路 3、选定java作为本课题的开发语言二、第二天的计划 使用墨刀进行高速公路收费系统的原型设计三、每日小结 1、根据收费站之间的距离计算价格 2、将出入车辆输入数据库 3、给车辆一个初始 ...
分类：
其他好文 时间：
2019-08-20 20:27:05
阅读次数：
80
时间问题：由于厂商的不同，导致时钟的时间偏差也不同。在长期的使用过程中，时钟的时间会有慢慢和其他时间发生偏差的情况，这就是常说的 “时钟漂移” 或 “时间漂移”。需求环境：大数据系统是对时间敏感的计算处理系统，时间同步是大数据能够得到正确处理的基础保障，是大数据得以发挥作用的技术支撑。公司服务器也需 ...
分类：
其他好文 时间：
2019-08-02 15:00:19
阅读次数：
193
数据有很多种下发方式： 简单的来说分为增量和全量。 全量获取： 当表是一个全量分区表： 当表是一个增量分区表： 当表是一个拉链表： 增量获取： 但是往往非大数据系统无法一口气吃掉千万级别的数据量。 一般会采取增量下发的方式。 ...
分类：
其他好文 时间：
2019-07-30 15:49:36
阅读次数：
1075
