-- 独立访客--需求：按照时间维度来统计独立访客及其产生的pv量 按照时间维度比如小时来统计独立访客及其产生的 pv 。 时间维度：时drop table dw_user_dstc_ip_h;create table dw_user_dstc_ip_h(remote_addr string,pvs ...
分类：
Web程序 时间：
2019-06-29 18:59:10
阅读次数：
190
1． 本项目中数据仓库的设计 注：采用星型模型 1.1． 事实表设计 原始数据表: ods_weblog_origin =>对应mr清洗完之后的数据 valid string 是否有效 remote_addr string 访客ip remote_user string 访客用户信息 time_lo ...
分类：
Web程序 时间：
2019-06-29 10:31:18
阅读次数：
193
#nginx的反向代理配置
location / {
proxy_pass http://192.168.0.3:8080;
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
pro... ...
分类：
Web程序 时间：
2019-06-14 14:48:33
阅读次数：
167
获取客户端IP地址if‘HTTP_X_FORWARDED_FOR‘inrequest.META:ipaddress=request.META[‘HTTP_X_FORWARDED_FOR‘]else:ipaddress=request.META[‘REMOTE_ADDR‘]
分类：
编程语言 时间：
2019-05-28 17:07:28
阅读次数：
192
log_format main escape=json '{ "@timestamp": "$time_iso8601", ' '"remote_addr": "$remote_addr",' '"costime": "$request_time",' '"r... ...
分类：
其他好文 时间：
2019-05-28 14:16:34
阅读次数：
290
http段中定义格式 在日志格式样式中: $remote_addr和$http_x_forwarded_for用于记录IP地址 $remote_user用于记录远程客户端用户名称； $time_local用于记录访问时间与时区； $request用于记录请求URL与HTTP协议； $status用于 ...
分类：
其他好文 时间：
2019-05-22 09:42:58
阅读次数：
92
一、创建表并导入日志数据，引出问题##建表hive (default)> create table IF NOT EXISTS default.bf_log_src( > remote_addr string, > remote_user string, > time_local string, .... ...
分类：
其他好文 时间：
2019-05-05 18:00:11
阅读次数：
118
L73 binary_remote_addr 对端二进制IPV4或IPV6 一般用作限制用户请求缓存key connection 递增链接序号 connection_requests 一条TCP链接上的请求数量 remote_addr 字符串格式IP地址 remote_port 字符串格式对端端口 ...
分类：
Web程序 时间：
2019-04-23 17:42:15
阅读次数：
183
realip模块的作用是：当本机的nginx处于一个反向代理的后端时获取到真实的用户IP,如果没有realip模块，nginx的access_log里记录的IP会是反向代理服务器的IP，PHP中$_SERVER[‘REMOTE_ADDR’]的值也是反向代理的IP。 而安装了realip模块，并且配置 ...
分类：
Web程序 时间：
2019-04-11 19:16:39
阅读次数：
220
irule：whenHTTP_RESPONSE{scan[IP::remote_addr]{%d.%d.%d.%d}cdHTTP::headerinsert"SIP""x.$c.$d"}结果截图：
分类：
Web程序 时间：
2019-03-27 15:34:28
阅读次数：
253
