一、为什么要进行分布式性能测试 当进行高并发性能测试的时候，受限于Jmeter工具本身和电脑硬件的原因，无法满足我们对大并发性能测试的要求。基于这种场景下，我们就需要采用分布式的方式来实现我们高并发的性能测试要求。 二、分布式性能测试原理 要进行分布式性能测试，我们首先要先一台机器作为主控机（Con
1、背景：公司数据迁移涉及到文件迁移，原有文件服务器没有使用minio,但是现在的新系统使用了minio。所以这就需要我们将文件上传到minio文件服务器中；由于历史文件数据量大，甲方要求可以通过服务器文件拷贝方式迁移文件，性能、安全性更高； 2、前期准备： 1）minio文件服务器已经安装完成；
https://zhuanlan.zhihu.com/p/428267241 LSM-Tree，全程为日志结构合并树，有趣的是，这个数据结构实际上重点在于日志结构合并，和 tree 本身的关系并不是特别大(除了各种可能的天外飞仙式的工程优化，一般来说只有 level0 采用了平衡树的结构) LSM-
https://dbaplus.cn/news-141-270-1.html Codis是一个分布式Redis解决方案，与官方的纯P2P模式不同，Codis采用的是Proxy-based的方案。今天我们介绍一下Codis以及下一个大版本RebornDB的设计，同时会介绍Codis在实际应用场景中的一
https://zhuanlan.zhihu.com/p/80495479 作者介绍:韦万，PingCAP 数据库研发工程师，主要领域是数据库的存储引擎研发，以及系统性能优化。 一、为什么我们需要 HTAP 数据库？ 在互联网浪潮出现之前，企业的数据量普遍不大，特别是核心的业务数据，通常一个单机的数
https://docs.pingcap.com/zh/tidb/v6.5/tune-region-performance 本文介绍了如何通过调整 Region 大小等方法对 Region 进行性能调优以及如何在大 Region 下使用 bucket 进行并发查询优化。 概述 TiKV 自动将底层数
# Windows平台文件拆分与完整性检查的过程 ## 场景 ``` 有时候在没有linux主机的情况下, 自己下载下来的文件比较大. 比较难以上传到一些特殊的系统/主机上面. 这个时候需要将文件进行拆分. 所以可以通过winrar 或者是zip等工具进行打包切分 但是一方面,压缩,解压缩表费时费力
iftop的学习与使用 背景 前段时间一直进行netperf 等网络性能验证工具的学习与使用. 监控很多时候采用了 node-exporter + prometheus + grafana来进行观察 但是到了一些特殊项目现场. 感觉grafana的大屏展示模式,其实存在很多不太优雅的地方. 还是需要
一、背景 验证系统调优对性能的影响，用sysbench做了一些简单的测试，具体调整方法可见官方文档 二、特殊说明 1.透明大页查看 # 查看透明大页是否开启，[]在always处表示开启，[]在never处表示关闭 cat /sys/kernel/mm/transparent_hugepage/en
https://www.cnblogs.com/gao88/p/12539112.html kafka 单独设置某个topic的数据过期时间kafka 默认存放7天的临时数据，如果遇到磁盘空间小，存放数据量大，可以设置缩短这个时间。 全局设置修改 server.properties log.rete
目录 Shell函数使用Shell函数的优点 Shell 函数定义使用原则函数传参函数变量的作用范围 函数递归阶乘递归目录函数库 Shell函数 将命令序列按格式写在一起可方便重复使用命令序列Shell函数定义 调用函数的方法 使用Shell函数的优点 使用函数可以避免代码重复使用函数可以将大的工程
https://www.cnblogs.com/yuxiaole/p/9809294.html 前言：工作中有一张表一年会增长100多万的数据，量虽然不大，可是表字段多，所以一年下来也会达到 1G，而且只增不改，故考虑使用分区表来提高查询性能，提高维护性。 oracle 11g 支持自动分区，不过得
一个监控数据的思考-sockets_used 背景 最近跟踪一个项目问题. Grafana的监控了里面有一个tcp的使用监控 CurrEstab 的数据量是: 700-2000 左右 但是同时有一个非常大的: Sockets_used的数据 数据量一般是 CurrEstab的十倍以上. 大家看起来感
针对于优化器在索引存在时依然使⽤全表扫描的情况下，使⽤缓存表和分区表是提升查询性能的有效⼿段。 缓存表 缓存表是将表的内容完全缓存到 TiDB Server 的内存中表的数据量不⼤,⼏乎不更改读取很频繁缓存控制: ALTER TABLE table_name CACHE|NOCACHE; # 使用t
Traefik Hub 简介 📚️Reference: 你的云原生网络平台 -- 发布和加固你的容器从未如此简单。 Traefik Hub 为您在 Kubernetes 或其他容器平台上运行的服务提供一个网关。 Traefik Hub 定位： 云原生网络平台 它有 2 大核心功能，我这次体验感觉也
简介 Minio是一个go编写基于Apache License v2.0开源协议的对象存储系统,是为海量数据存储、人工智能、大数据分析而设计，它完全兼容Amazon S3接口，十分符合存储大容量的非结构化数据从几十kb到最大5T不等。是一个小而美的开源分布式存储软件。 特点 简单、可靠：Minio采
我家人其实已经忍家里的小米电视很久了，开机太慢，分类繁多，还有广告； 但是又不希望失去它的智能性，比如自带的小爱同学，又能互联很多智能设备。 近年来大环境比较卷，没啥自己的时间来仔细研究这些。 总而言之，不想太折腾，不想root，但是想换用清爽一些的桌面，删除不必要的应用和广告。 早先试过直接安装第
背景 为什么讲这么小的一个问题呢？因为今天在进行系统上线的时候遇到了这个问题。 这次的上线动作还是比较大的，由于组织架构拆分，某个接入层服务需要在两个部门各自独立部署，以避免频繁的跨部门沟通，提升该接入层服务的变更效率。 该接入层服务之前是使用cookie + 内存session机制的，这次要独立部
更多精彩内容，欢迎关注公众号：数量技术宅，也可添加技术宅个人微信号：sljsz01，与我交流。 二八轮动策略原理 二八轮动策略，通俗的来讲就是大小盘股的轮动策略。 其中“二”代表数量占比20%左右的大盘权重股，“八”代表数量占比80%左右的中小盘股票。如果我们仔细观察股市，经常会看到这样的现象，市场
日常工作中，有时我们会遇到需要地图来展示我们的数据场景，利用POWERBI，我们可以快速的制作自己的业务地图。 Powerbi自带了三大地图，今天我们用到的是形状地图。 步骤讲解： 第一步：下载对应的地图资源，可以是全国的，也可以是具体省市的，这个根据我们的具体业务来进行选择。 http://dat
