在spark的资源调度中 1、集群启动worker向master汇报资源情况 2、Client向集群提交app,向master注册一个driver(需要多少core、memery),启动一个driver 3、Driver将当前app注册给master,(当前app需要多少资源),并请求启动对应的Ex ...
分类:
其他好文 时间:
2019-04-30 12:23:20
阅读次数:
140
张超:又拍云系统开发高级工程师,负责又拍云 CDN 平台相关组件的更新及维护。Github ID: tokers,活跃于 OpenResty 社区和 Nginx 邮件列表等开源社区,专注于服务端技术的研究;曾为 ngx_lua 贡献源码,在 Nginx、ngx_lua、CDN 性能优化、日志优化方面 ...
分类:
其他好文 时间:
2019-04-29 12:52:06
阅读次数:
267
1、项目启动顺序: 启动项目: 启动celery beat 启动celery worker 启动celery flower监控任务运行情况 2、Django 结合 celery动态配置任务 1、项目使用的版本 Django==1.11.7 celery==3.1.18 django-celery== ...
分类:
其他好文 时间:
2019-04-28 15:31:12
阅读次数:
224
1. 语义化标签 2. 增强型表单 (1)新的表单输入类型 (2)新表单元素 (3)新表单属性 3. 视频和音频 4. Canvas绘图(图形、路径、文本、渐变、图像) 5. SVG绘图 (与Canvas的区别) 6. 地理定位 7. 拖放API 8. Web Worker 完整的Web Worke ...
分类:
Web程序 时间:
2019-04-25 14:43:20
阅读次数:
173
######Nginx配置文件nginx.conf中文详解##### #定义Nginx运行的用户和用户组user www www; #nginx进程数,建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型,[ debug | info | notice | w ...
分类:
其他好文 时间:
2019-04-25 14:29:27
阅读次数:
140
ngixn nginx是一个高性能http服务器和反向代理web服务器,淘宝还在基础上开发了tengine。 nginx是一个master进程与多个work进程进行工作,master进程负责管理work进行,work进程负责接收具体客户请求进行工作,worker_processes是设置work进程 ...
分类:
其他好文 时间:
2019-04-25 11:50:43
阅读次数:
102
crontab是单机工具(所有worker都在调度,如果有1000个任务,所有worker都在调用者1000个任务。对于编译型语言来说,排序一个一千万的数组只需要一秒,对于一千一万的调度,无需担心性能)(相当于完成一个到worker集群的通知,通知它们杀死任务)
分类:
其他好文 时间:
2019-04-21 17:23:26
阅读次数:
125
一 postMessage应用于主页面和iframe之间进行数据的传递 1 子iframe页面向主页面进行数据传递; 2 主页面向子页面进行数据的下发,比如需要将初始计数的数据分发到各个iframe 二 postMessage应用于js主线程和worker多线程之间进行数据传递,下面对比原生和web ...
分类:
其他好文 时间:
2019-04-19 18:13:39
阅读次数:
157
Dubbo 启动时报错 win+R cmd ipconfig看到 在上面看到dubbo去连接Vmare虚拟机的ip去了。 解决办法: 关闭Vmare的虚拟的网络 ...
分类:
其他好文 时间:
2019-04-18 22:13:43
阅读次数:
360
[root@localhost ~]# vim nginx.conf user nginx; worker_processes 1; error_log /var/log/nginx/error.log warn; pid /var/run/nginx.pid; events { worker_co... ...
分类:
其他好文 时间:
2019-04-17 09:28:49
阅读次数:
158