码迷,mamicode.com
首页 >  
搜索关键字:awk 实战    ( 21596个结果
干货 | Logstash自定义正则表达式ETL实战
0、题记本文建立在干货|LogstashGrok数据结构化ETL实战上,并专注于在Grok中使用自定义正则表达式。有时Logstash没有我们需要的模式。幸运的是,我们有正则表达式库:Oniguruma。Oniguruma是一个灵活的正则表达式库。它包含多种语言的不同正则表达式实现的特性。Github地址:https://github.com/kkos/oniguruma1、基础再认知Logsta
分类:其他好文   时间:2020-07-31 01:08:58    阅读次数:76
纳尼,Spring Cloud Feign 数据竟然丢失了
故事背景有个朋友在微信上问我,说Feign调用的时候服务提供方有结果,但是在调用方这边这个字段的值却丢失了,我一听感觉不可思议,如果说全部的值都没有,那有可能是报错了之类的情况。但是某一个字段的值不见了,这种情况还真没遇到过。下图就是调用方的获取的信息,nickname值丢了。Feign内部排查数据是否取到如果服务提供方有值并且返回了,那么唯一的问题就是出在Feign的内部了,怀疑跟内部解码有关系
分类:编程语言   时间:2020-07-31 01:08:17    阅读次数:139
API加密框架Monkey-Api-Encrypt发布1.2版本
框架介绍monkey-api-encrypt是我之前写的一个API加密的框架,主要是将加密/解密的逻辑交给框架实现,等数据到达Controller后自动解密了,让开发人员不需要关注数据的加解密操作。Github:https://github.com/yinjihuan/monkey-api-encrypt[1]目前,502个关注,今天能到520么?新功能介绍Bug修复当项目的context-pat
分类:Windows程序   时间:2020-07-31 01:07:37    阅读次数:120
干货 | Logstash Grok数据结构化ETL实战
0、题记日志分析是ELK最常用、最核心业务场景之一。如果你正在使用ElasticStack并且正尝试将自定义Logstash日志映射到Elasticsearch,那么这篇文章适合你。Logstash写入ES之前的中间数据处理过程一般叫做:数据ETL或者数据清洗。本文重点介绍数据清洗环节的非结构数据转化为结构化数据的——Grok实现。1、认知前提老生常谈,夯实基础认知。ELKStack是三个开源项目
分类:其他好文   时间:2020-07-31 01:06:57    阅读次数:77
数据库基础之SQL查询语句执行流程
MySQL数据库架构(图片来自极客时间林晓彬MySQL实战45讲) MySQL可以分为server层和引擎层 Server 层包括连接器、查询缓存、分析器、优化器、执行器等,涵盖 MySQL 的大多数核心服务功能,以及所有的内置函数(如日期、时间、数学和加密函数等),所有跨存储引擎的功能都在这一层实 ...
分类:数据库   时间:2020-07-30 22:13:18    阅读次数:85
Unity实战开发之PokemonGo(常见问题集更新中)
最近在跟着蛮牛教育学习Unity3d实战项目PokemonGo 尽管视频里老师讲解得很详细(奈何我是菜中之菜) 开发过程中还是遇到了不少问题 所以想简单做一个记录,欢迎指正批评! 一、地图人物玩家替换报错之为什么我动不了了? 问题描述:在导入人物模型后,设置好参数拖入Avatar中,然后删除原有角色 ...
分类:编程语言   时间:2020-07-30 14:33:11    阅读次数:86
Nginx Linux详细安装及部署实战
Nginx Linux详细安装及部署实战 Nginx 常用基础命令 #启动 Nginx /usr/local/webserver/nginx/sbin/nginx #默认配置文件 /usr/local/webserver/nginx/conf/nginx.conf #启动 指定配置文件 ./sbin ...
分类:系统相关   时间:2020-07-29 21:19:14    阅读次数:106
Elasticsearch能检索出来,但不能正确高亮怎么办?
1、问题引出微信群里的线上实战问题:诸位大哥,es中:keyword类型的字段进行高亮查询,值为123asd456,查询sd4,高亮结果是em123asd456em有没有办法只对我查询的sd4高亮?明明查询id的一部分,却高亮结果是整个id串,怎么办?死磕Elasticsearch技术微信群2、一个Demo描述清楚问题注:本文示例DSL在7.2版本运行ok,6.X之前早期版本可能需要微调。PUTf
分类:其他好文   时间:2020-07-29 15:05:11    阅读次数:164
干货 | Elasticsearch开发人员最佳实战指南
题记几个月以来,我一直在记录自己开发Elasticsearch应用程序的最佳实践。本文梳理的内容试图传达Java的某些思想,我相信其同样适用于其他编程语言。我尝试尽量避免重复教程和Elasticsearch官方文档中已经介绍的内容。本文梳理的内容都是从线上实践问题和个人总结的经验汇总得来的。文章从以下几个维度展开讲解:映射(Mapping)设置(Setting)查询方式(Querying)实战技巧
分类:其他好文   时间:2020-07-29 15:04:50    阅读次数:71
Elasticsearch实战 | 如何从数千万手机号中识别出情侣号?
1、问题描述您好,请教个问题。我现在有2千多万的手机号码信息保存在es里。5个分片,3个节点。现在的需求是将后八位相同的号码匹配到一起,重新放到一个index里。组成情侣号。方便后续查询情侣号列表。我目前的做法是用scroll查询出一万条,多线程循环一万条中的每条,去全库扫描---但是这种做法一分钟才能处理一万条。您有什么新的思路没。死磕Elasticsearch知识星球https://t.zsx
分类:移动开发   时间:2020-07-29 15:04:19    阅读次数:82
21596条   上一页 1 ... 57 58 59 60 61 ... 2160 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!