内存虚拟内存Linux 采用的是虚拟内存机制，每个进程都有自己的虚拟内存地址空间，仅当实际使用内存的时候才会映射到物理内存地址之上。这种设计提供了物理内存的超额分配，Linux 中的内存管理机制包括页换出守护进程（page out daemon）、物理换页设备（swap device），以及
https://www.jianshu.com/p/c5aa9197ecf4 背景 大多数文件系统的默认 IO 操作都是缓存 IO，又被称作标准IO。在 Linux 的缓存 IO 机制中，操作系统会将 IO 的数据缓存在文件系统的页缓存（page cache ）中，也就是说，数据会先被拷贝到操作系统
每个概念是对不同的对象而言的，但它们有一定的联系 这些概念的分析背景是Linux下的内存页和磁盘结构 扇区 是硬盘等存储设备传送单位，大小一般为512B 块 是VFS和文件系统的传送单位（所以相关设备也成为块设备），大小必须是2的幂，不能超过页的大小。 段 是一个内存页或内存页的一部分，它包含磁盘上
一、MySQL记录存储： MySQL InnoDB的数据由B+树来组织，数据记录存储在B+树数据页（page）中，每个数据页16kb，数据页 包括页头、虚记录、记录堆、自由空间链表、未分配空间、slot区、页尾七部分组成。 所有的非终端结点可以看成是索引部分，结点中仅含有其子树根结点中最大(或最小)
https://www.cnblogs.com/wenbochang/p/16723537.html Mysql一张表可以存储多少数据 在操作系统中，我们知道为了跟磁盘交互，内存也是分页的，一页大小4KB。同样的在MySQL中为了提高吞吐率，数据也是分页的，不过MySQL的数据页大小是16KB。（确
索引膨胀 对于索引，随着业务不断的增删改，会造成膨胀，尤其Btree索引，也会涉及索引分裂、合并等，导致索引访问效率降低、维护成本增加。另外，索引页的复用与HEAP PAGE不一样，因为索引的内容是有序结构，只有符合顺序的ITEM才能插入对应的PAGE中，不像HEAP TUPLE，只要有空间就可以插
一、引入索引 在没有索引的情况下，不论是根据主键列或者其他列的值进行查找，由于我们并不能快速的定位到记录所在的页，所以只能从第一个页沿着双向链表一直往下找，因为要遍历所有的数据页，时间复杂度就是O(n),所以这种方式显然是超级耗时的。所以我们需要采取一定的数据结构来存储数据，方便我们进行数据的增删改
一、背景 验证系统调优对性能的影响，用sysbench做了一些简单的测试，具体调整方法可见官方文档 二、特殊说明 1.透明大页查看 # 查看透明大页是否开启，[]在always处表示开启，[]在never处表示关闭 cat /sys/kernel/mm/transparent_hugepage/en
在过去，业务人员通常不熟悉数据建模，因为数据建模往往是专业的IT人员的领域。但是，得益于POWERBI和POWER PIVOT FOR EXCEL ，这样的日子一去不复返了。那么，什么是数据模型呢？ 一：思维导图 二：原文截图 第6页 三：翻译 在过去，业务人员通常不熟悉数据建模，因为数据建模往往是
LFU 的设计与实现 作者：Grey 原文地址： 博客园：LFU 的设计与实现 CSDN：LFU 的设计与实现 题目描述 LFU（least frequently used）。即最不经常使用页置换算法。 题目链接：LeetCode 460. LFU Cache 主要思路 首先，定义一个辅助数据结构
在某些时候我们需要读写的进程可能存在虚拟内存保护机制，在该机制下用户的`CR3`以及`MDL`读写将直接失效，从而导致无法读取到正确的数据，本章我们将继续研究如何实现物理级别的寻址读写。首先，驱动中的物理页读写是指在驱动中直接读写物理内存页（而不是虚拟内存页）。这种方式的优点是它能够更快地访问内存，因为它避免了虚拟内存管理的开销，通过直接读写物理内存，驱动程序可以绕过虚拟内存的保护机制，获得对系统
记录工作中早该加深印象的一个小case： ajax请求不能显式拦截 302响应。 我们先来看一个常规的登录case: 浏览器请求资源，服务器发现该请求未携带相关凭据（cookie或者token） 服务器响应302，并在响应头Location写入重定向地址， 指示浏览器跳转到登录页 浏览器跳转到登录页
哈喽大家好我是咸鱼，在《Linux 内存管理 pt.1》中我们学习了什么是物理内存、虚拟内存，了解了内存映射、缺页异常等内容 那么今天我们来接着学习 Linux 内存管理中的多级页表和大页 多级页表&大页 在《Linux 内存管理 pt.1》中我们知道了内核为每个进程都维护了一张页表，这张页表用来记
昨天我们通过【i博客园】公众号发布文章 被百度降权的经历：没有百度的日子，是百度给的无期徒刑 时发现，百度不但没有回心转意，反而对园子的处罚更加严厉了，博客主站（www域名）的新发内容一天内0收录。 而在去年9月21日我们完全解除对百度蜘蛛的屏蔽后（详见博文），9月25日那天一天内的百度收录有20页
好家伙，我回来了， 本篇为《JS高级程序设计》第十四章“DOM编程”学习笔记 1.DOM编程 我们知道DOM是HTML文档的编程接口， 我们可以通过HTML代码实现DOM操作， 也同样能够通过JavaScript实现DOM操作。 2.JS操作DOM 我们来简单的举个例子： 随便开一个空白的html页
字段类型为 text，独立出来一张表，用主键来对应，避免影响其它字段索 引效率。 1、因为mysql 是行存储模式，所以会把整行读取出来。text 储存了大量的数据。读取时，占了大量的io。所以会十分的慢。 2、每行的数据过大 行溢出 InnoDB 会将一些大对象数据存放在数据页之外的 BLOB 页
Kafka 性能优化与问题深究 一．Kafka深入探究 1.1 kafka整体介绍 1. 1.1 Kafka 如何做到高吞吐、低延迟的呢？ Kafka是一个分布式高吞吐量的消息系统，这里提下 Kafka 写数据的大致方式：先写操作系统的页缓存（Page Cache）,然后由操作系统自行决定何时刷到磁
作者：郑啟龙 摘要： 对于MYSQL的INNODB存储引擎的索引，大家是不陌生的，都能想到是 B+树结构，可以加速SQL查询。但对于B+树索引，它到底“长”得什么样子，它具体如何由一个个字节构成的，这些的基础知识鲜有人深究。本篇文章从MYSQL行记录开始说起，层层递进，包括数据页，B+树聚簇索引，B
一：背景 1. 讲故事 在 SQLSERVER 中有非常多的索引，比如：聚集索引，非聚集索引，唯一索引，复合索引，Include索引，交叉索引，连接索引，奇葩索引等等，当索引多了之后很容易傻傻的分不清，比如：复合索引 和 Include索引，但又在真实场景中用的特别多，本篇我们就从底层数据页层面厘清
一、jupyter notebook介绍 1、简介 Jupyter Notebook是基于网页的用于交互计算的应用程序。其可被应用于全过程计算：开发、文档编写、运行代码和展示结果。——Jupyter Notebook官方介绍 简而言之，Jupyter Notebook是以网页的形式打开，可以在网页页
