经典教程|基于SparkGraphX实现微博二度关系推荐导读：图计算是近几年大数据领域非常受关注的热点，社交网络中的好友关系推荐是一种典型图计算场景，本文是微博关系项目团队在二度关系计算中的一些实践，供高可用架构读者参考，作者为王舜、蒋生武、田瑞林。关系计算问题描述二度关系是指用户与用户通过关注者为桥梁发现到的关注者之间的关系。目前微博通过二度关系实现了潜在用户的推荐。用户的一度关系包含了关注、好
分类：
其他好文 时间：
2020-11-07 17:07:30
阅读次数：
27
1.USERADD命令 1.作用useradd命令用来建立用户帐号和创建用户的起始目录，使用权限是终极用户。2.格式useradd [－d home] [－s shell] [－c comment] [－m [－k template]] [－f inactive] [－e expire ] [－p ...
分类：
系统相关 时间：
2020-11-07 16:45:31
阅读次数：
23
一.关于HUP信号 1.什么是HUP信号 hup信号除了在上一篇讲的从新加载配置文件功能外还具有另外一种功能 当用户注销(exit, logout, Ctrl + d),或者网络断开时,终端会收到Linux HUP 信号 HUP信号会使其关闭所有子进程, 这样就会关闭你不想关闭的进程 解决方法: 1 ...
分类：
系统相关 时间：
2020-11-07 16:44:10
阅读次数：
20
转至： 吴一达 2016-11-24 原文 在利用Jenkins实现Weblogic应用自动部署的功能时，如何通过Shell 脚本自动更新Weblogic部署的应用程序呢？ 可以使用weblogic.jar包中的weblogic.Deployer这个class 。 命令如下： java weblog ...
分类：
Web程序 时间：
2020-11-07 16:14:55
阅读次数：
22
机器学习平台痛点与模型提升方法：基于Spark的机器学习平台在点融网风控应用介绍编者按：大数据和机器学习是近年来快速增长的热门领域，各个领域的数据量和数据规模都以惊人的速度增长。本文是近期举行的架构实践日点融网刘利就“机器学习平台在点融网业务的应用介绍”这一话题的精彩分享。作者简介：刘利，点融网DataScientistTeam负责人，从事互联网数据分析和数据挖掘近十年。现任点融网DataScie
分类：
其他好文 时间：
2020-11-07 15:58:21
阅读次数：
20
上节课复习： ps aux | grep "T" kill -cont pid 今日内容： 1、hup信号 让进程脱离当前会话窗口session而运行： 原理一致是？？？ nohup setsid 在子shell中启动进程 screen 2、查看网络 3、proc文件系统 free lscpu 4、 ...
分类：
其他好文 时间：
2020-11-06 02:46:23
阅读次数：
25
这个以后肯定用的上的，直接放命令了#!/bin/bashSTR=‘GNU/Linuxisanoperatingsystem‘SUB=‘Linux‘if[["$STR"=~."$SUB".]];thenecho"It‘sthere."fi答案是It‘sthere下面这个是我脚本用到的，用正则表
分类：
系统相关 时间：
2020-11-06 02:40:24
阅读次数：
30
关于概念的东西，其实官网说的很全，对于个人理解就是，flink、spark等等大数据处理平台就是把原来需要我们自己实现的功能，全部框架封装好，像是跨机器的大规模计算、内存/cpu等等资源管理、状态管理(锁还有恢复机制等等）框架全部封装好了，作为开发来说就只需要关心自己要实现的业务就可以了以下内容来自官网，从3个方面介绍Flink：架构ApacheFlink是一个框架和分布式处理引擎，用于在无边界和
分类：
其他好文 时间：
2020-11-06 02:27:17
阅读次数：
21
基本概念部分，批处理和流处理的区别批处理在大数据世界有着悠久的历史,比较典型的就是spark。批处理主要操作大容量静态数据集，并在计算过程完成后返回结果。批处理模式中使用的数据集通常符合下列特征：（1）有界：批处理数据集代表数据的有限集合（2）持久：数据通常始终存储在某种类型的持久存储位置中（3）大量：批处理操作通常是处理极为海量数据集的唯一方法批处理非常适合需要访问全套记录才能完成的计算工作。例
分类：
其他好文 时间：
2020-11-06 02:26:18
阅读次数：
29
使用vim auto_backup_mysql.sh 在里面输入 #auto backup mysql db #by authors dxw 2017 #dufine backup path BAK_DIR=/data/backup/`date +%Y%m%d` MYSQLDB=syuee MYSQ ...
分类：
数据库 时间：
2020-11-06 02:20:23
阅读次数：
28
