流式查询流式查询 指的是查询成功后不是返回一个集合而是返回一个迭代器，应用可以通过迭代器每次取一条查询结果。流式查询的好处是能够降低内存使用。例如我们想要从数据库取 1000 万条记录而又没有足够的内存时，就不得不分页查询。 而分页查询就需要我们按照顺序查询并设置一个参数来记录当前进度并在下次查询时
HBase是一款开源高可靠性、扩展性、高性能和灵活性的分布式非关系型数据库，本文围绕数据库选型以及使用HBase的痛点展开，从四个方面对HBase的使用进行优化，取得了一些不错效果。
Apifox 新版本上线啦！！！ 看看本次版本更新主要涵盖的重点内容，有没有你所关注的功能特性： 自动化测试支持设置「定时任务」 支持内网自部署服务器运行「定时导入」 数据库均支持通过 SSH 隧道连接 自动化测试数据库操作优化 将 Apifox 更新至最新版，一起开启全新体验吧！ 更新至 Apif
生成全局唯一 ID 全局唯一 ID 需要满足以下要求： 唯一性：在分布式环境中，要全局唯一 高可用：在高并发情况下保证可用性 高性能：在高并发情况下生成 ID 的速度必须要快，不能花费太长时间 递增性：要确保整体递增的，以便于数据库创建索引 安全性：ID 的规律性不能太明显，以免信息泄露 从上面的要
ELK作为业界最常用日志同步方案，我们今天尝试一下使用docker快速搭建一套ELK方案。ELK使用国内加速源拉取的镜像比较旧，有条件的朋友可以拉取官网的源。elasticsearch作为日志储存库（数据库），kibana的作用通过elasticsearch的API接口调取其中数据作可视化分析，lo
跟着官方文档熟悉一遍创建spring工程的步骤 https://spring.io/guides/gs/spring-boot https://juejin.cn/post/7077958723829760008 demo简介 整个demo的预期目标是： 管理一堆玩家的数据，数据库使用的是现成的我们
问：你最害怕的事情是什么？ 答：搓澡 问：为什么？ 答：因为有些人一旦错过，就不在了 Explain 这个词在不同的上下文中有不同的含义。在数据库查询优化的上下文中，"EXPLAIN" 是一个常用的 SQL 命令，用于显示 SQL 查询的执行计划。执行计划是数据库如何执行查询的一个详细描述，包括它将
简介 本教程讲解了一下如何设计构建一个高性能、高可靠、高扩展的Zabbix 监控集群。 架构图 架构图PDF下载： https://songxwn.com/file/Zabbix_HA.pdf Pigsty 时序数据库集群 Zabbix Server 和 Grafana的数据都是存放在数据库的，而Z
TTL是Time To Live的缩写，通常意味着元素的生存时间是多长。 应用场景 数据库：在redis中我们最常见的就是缓存我们的数据元素，但是我们又不想其保留太长的时间，因为数据时间越长污染的可能性就越大，我们又不想在后续的程序中设置删除，所以我们此时需要设置过期时间来让数据自动淘汰。 sete
Redis，英文全称是Remote Dictionary Server（远程字典服务），是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。 与MySQL数据库不同的是，Redis的数据是存在内存中的。它的读写速度非常快，每...
当前GaussDB(for MySQL)的Purge优化功能，通过任务流水线化、线程优先级调整、二次分发等手段，避免数据库undo log堆积，极大提升Purge的性能，大幅改善用户体验。
简介 介绍及简单使用：https://www.cnblogs.com/daemon365/p/17690167.html 源码地址：https://github.com/etcd-io/bbolt page 因为 boltdb 是要落盘的，所以就要操作文件。为了提高效率，boltdb 会和其他数据库
一、写在开头 在计算机领域中百分之九十以上的程序拥有着和外部设备交互的功能，这就是我们常说的IO(Input/Output：输入/输出)，所谓输入就是外部数据导入计算机内存中的过程，输出则是将内存或者说程序中的数据导入到外部存储中，如数据库、文件以及其他本地磁盘等。 二、什么是IO流 这种输入输出往
在一些中小型项目开发中，我们通常会使用自增 ID 来作为主键的生成策略，但随着时间的推移，数据库的信息也会越来越多，尤其是使用自增 ID 作为日志表的主键生成策略时，可能很快就会遇到 ID 被用完的情况，那么如果发生了这种情况，MySQL 又会怎样执行呢？ PS：当然，在分库分表的场景中，我们通常会
1、之前kettle cdc mysql的时候使用的方案是canal+kafka+kettle，今天我们一起学习下使用kettle的插件Debezium直接cdc mysql。 注：CDC (Change Data Capture) 是一种技术，用于捕获和同步数据库中的更改。 1）Debezium步
作者：来自 vivo 互联网存储研发团队-Guo Xiang 本文介绍了TiDB中最基本的PointGet算子在存储层TiKV中的执行流程。 一、背景介绍 TiDB是一款具有HTAP能力(同时支持在线事务处理与在线分析处理 )的融合型分布式数据库产品，具备水平扩容或者缩容等重要特性。TiDB 采用多
2阶段（2PC）提交方案： 实现原理：基于XA规范搞的一套分布式事务的理论，也可以叫做一套规范，或者是协议。 （1）准备阶段（Prepare phase）：事务管理器给每个参与者发送prepare消息，每个数据库参与者在本地执行事务，并写本地的Undo/Redo，此时事务没有提交。 （2）提交阶段（
本文完整代码及附件已上传至我的Github仓库https://github.com/CNFeffery/DataScienceStudyNotes 1 简介 大家好我是费老师，就在几天前，经过六年多的持续开发迭代，著名的开源高性能分析型数据库DuckDB发布了其1.0.0正式版本。 DuckDB具有
测试场景：高可用场景--限流测试； 被测交易：查询类交易，HTTP协议； 交易链路：jmeter - web - coimpre(前置服务) -- coimbp -- cobp （coimbp 、coimpre 都会访问同一个数据库）； 注：cobp 为合肥机房，其他服务均为北京机房，要注意跨网段存
Oracle临时表在处理临时数据、会话数据隔离和复杂查询优化方面非常有用。 其底层逻辑是通过Oracle特殊的临时表来减少I/O操作和日志开销，提高了数据库性能和查询效率。开发者可以根据具体需求和场景，合理使用临时表来简化数据处理逻辑和提高系统性能。 早期开发人员在使用Oracle数据库时，经常因为
