nf_conntrack (在老版本的 Linux 内核中叫 ip_conntrack )是一个内核模块，用于跟踪一个网络连接的状态 一旦内核 netfilter 模块 conntrack 相关参数配置不合理，导致 nf_conntrack table full ，就会出现丢包、连接无法建立的问题
# 背景 我前面写了几篇文章，讲c3p0数据库连接池发生了连接泄露，但是随机出现，难以确定根因，最终呢，为了快速解决问题，我是先写了个shell脚本，脚本主要是检测服务的接口访问日志，看看过去的30s内是不是接口几乎都超时了，如果是的话，咱们就重启服务。然后把这个shell加入到了crontab里，
# 背景 最近，负责基础设施的同事，要对一批测试环境机器进行回收，回收就涉及到应用迁移，问题是整个过程一团乱。比如服务器A上一堆应用要调用服务器B上一堆服务，结果服务器B被回收了，然后服务器A上一堆应用报错。 今天就是负责查一个问题，app上一个头像上传的接口，之前都好好的，不知道怎么就不能访问了，
# 背景 上周都是查测试环境的问题，比如，我上一篇写的[问题排查：nginx的反向代理感觉失效了一样 ](https://www.cnblogs.com/grey-wolf/p/17655238.html)，就是说这个事的。在文章里，最终查到是nginx的全连接队列满了（每个监听端口有个队列，完成三
一次排查某某云上的redis读超时经历 性能排查，服务监控方面的知识往往涉及量广且比较零散，如何较为系统化的分析和解决问题，建立其对性能排查，性能优化的思路，我将在这个系列里给出我的答案。 问题背景 最近一两天线上老是偶现的redis读超时报警，并且是业务低峰期间，甚是不解，于是开始着手排查。 以下
问题排查 应用程序不在接收新请求 关键词：springboot，jstack，Arthas 问题描述 查看前端网页，发现所有请求都pending，都超时。但是查看后端程序发现并没有挂掉，cpu，内存都正常。但是日志不打印了。看起来应用程序整体卡死了。 然后重启应用程序，发现又能正常运行了，但是过了半
小编工作中负责业务的一个服务端系统，使用了 Elasticsearch 服务做数据存储，业务运营人员反馈，用户在使用该产品时发现，用户后台统计的订单笔数和导出的订单笔数不一致！对此进行排查并进行总结
新买了一个Macbook Pro . 之前的工程搬家过来， 这天要跑个单元测试。 发现Junit4 一直处于运行中。没有错误信息，没有用例执行结果。遂开始排查原因。 这里插一句，苹果芯片的Mbp还是很好用的，除了性能够用之外，最主要是安静+不热。 这对比我之前的i7版本的真是太明显了。 之前的i7在
1. 背景 推荐系统的推荐请求追踪日志，通过ELK收集，方便遇到问题时，可以通过唯一标识sid来复现推荐过程 最近在碰到了几个bad case，需要通过sid来查询推荐日志，但发现部分无法在kibana查询到 2. 分析 推荐日志的整个收集流程如下： flowchart LR 线上机器日志 -->
1. 背景 另外一个推荐系统的推荐请求追踪日志，通过ELK收集，方便遇到问题时，可以通过唯一标识sid来复现推荐过程 在一次上线之后，发现日志大量缺失，缺失率达90%，确认是由上线引起的，但因为当时没立即发现这个问题，所以没有通过回滚解决 上线的内容改动了推荐请求日志，数据格式未变，增加了单条日志的
https://www.jianshu.com/p/d0dff28a4cce 一次艰难的内存泄露排查 现象 2019.4.26 22:00左右，通过jstat -gcutil pid 5000 ,发现fgc次数很多而且频繁，此时老年代占比已经大约70%左右，且已经回收不了内存，我们这边设置的fgc阈
https://www.modb.pro/db/79444 霸爷博客，干货满满。有两篇文章现在还记得，《Linux下如何知道文件被哪个进程写》[1]和《巧用Systemtap注入延迟模拟IO设备抖动》[2]，周末突然想起来，发现能看懂了:) 本文虽然说是小技巧，可是难度一点也不低 ^_^ 什么是 s
https://bbs.huaweicloud.com/blogs/386325 【摘要】 traceroute 命令是一个有用且易于运行的网络诊断工具，本文给大家介绍了12个traceroute 命令示例，希望本文能够对您使用traceroute 命令有所帮助，如果有问题可以在下方评论区与我讨论！
https://www.yisu.com/zixun/574746.html 这篇文章主要讲解了“Redis延迟问题怎么排查”，文中的讲解内容简单清晰，易于学习与理解，下面请大家跟着小编的思路慢慢深入，一起来研究和学习“Redis延迟问题怎么排查”吧！ 使用复杂度高的命令 如果在使用Redis时，发
K8S 问题排查： cgroup 内存泄露问题 - kmemhttps://www.cnblogs.com/leffss/p/15019898.html 目录 前言 现象 原因 解决方案 方案一 方案二 方案三 验证方式 影响范围 原理解释 kmem 是什么 cgroup 与 kmem 机制 kme
https://www.jianshu.com/p/97860bbeb45c 双十一了，头一天晚上10点左右收到阿里云cpu超过90%短信报警。 第二天上班了，开始处理,步骤如下： 1、top找出cpu高的java进程号9592 2、top -Hp 9592查看cpu占用time最高的线程编号281
https://www.cnblogs.com/hphua/p/16395893.html 1、遇到的问题：应用在hi3536上跑一段不固定的时间，随之就会出现重启的现象；打印如下； app-run invoked oom-killer: gfp_mask=0x1042d0, order=3, oo
一、前言 处理过线上问题的同学基本上都会遇到系统突然运行缓慢，CPU 100%，以及Full GC次数过多的问题。当然，这些问题的最终导致的直观现象就是系统运行缓慢，并且有大量的报警。本文主要针对系统运行缓慢这一问题，提供该问题的排查思路，从而定位出问题的代码点，进而提供解决该问题的思路。 二、分析
这篇博文记录的非常详细：https://blog.csdn.net/zhaohaijie600/article/details/45246569 我的笔记： 写的C++程序老是运行两三天就挂了，关键是挂的时候连“segment fault”都不显示。动用了gdb、valgrind还是没办法，最后还是
https://juejin.cn/post/6854573220733911048 遇到了一个 glibc 导致的内存回收问题，查找原因和实验的的过程是比较有意思的，主要会涉及到下面这些： Linux 中典型的大量 64M 内存区域问题 glibc 的内存分配器 ptmalloc2 的底层原理 如
