标签 日志分析 下的文章

logstash 按周创建Elasticsearch索引

最近做了一个日志收集中心,按月创建的Elasticsearch索引名称,index => "nginx-%{beat[hostname]}-access-%{+YYYY.MM}" 还没到月底,日志6千多万行,服务器顶不住了。于是决定按周创建Elasticsearch索引,在某度半天没找到,只好爬出去找。总算找到了logstash 按周创建Elasticsearch索...

一步一重天 2019 年 12 月 21 日 暂无评论

nginx日志分析统计近两天WEB走了多少流量和图片走了多少流量

今天一朋友要帮忙他看一下他的服务器流量使用情况,他服务器也没安装zabbix等监控软件,只能通过日志分析了。WEB日志由于没有分割,是快一个月的,巨大,先进行分割再统计。cat bb.log | awk -F ' ' '{split($4,array,"[");if(array[2]>="02/Jul/2019:20:37:10" &&...

一步一重天 2019 年 07 月 04 日 暂无评论

linux awk命令对apache日志做分析筛选时间段内的日志

用得少的东西,真得练习下,增加记忆和动手能力。日志格式192.168.0.3 - - [05/Jan/2019:09:34:31 +0800] "GET /api/data/getIndex.html HTTP/1.1" 200 238 "https://xxxxxxxxxxx/home.html" "Mozilla/5.0 (Windows...

一步一重天 2019 年 01 月 08 日 暂无评论

linux 运用sort对访问日志按流量大小排序

111.206.000.000 - - [02/Aug/2018:09:46:01 +0800] "GET /company/list-htm-a-1288.html HTTP/1.1" 200 9027 -t 0.081 -r 0.081 "http://www.baidu.com/s?wd=capitalvdd" "Mozilla/5...

一步一重天 2018 年 08 月 02 日 暂无评论