摘要：模型压缩算法旨在将一个大模型转化为一个精简的小模型。工业界的模型压缩方法有：知识蒸馏、轻量化模型架构、剪枝、量化。 本文分享自华为云社区《深度学习模型压缩方法综述》，作者：嵌入式视觉 。 一，模型压缩技术概述 因为嵌入式设备的算力和内存有限，因此深度学习模型需要经过模型压缩后，方才能部署到嵌入
本文分享自华为云社区《选择KV数据库最重要的是什么？》，作者：GaussDB 数据库 。 经常有客户提到KV数据库，但却偏偏“不要Redis”。比如有个做安全威胁分析平台的客户，他们明确表示自己对可靠性要求非常高，需要的不是开源Redis这种内存缓存库，而是KV数据库。 虽然最后我也没问清楚他们业务
摘要：合理地管理和分配系统资源，是保证数据库系统稳定高效运行的关键。 本文分享自华为云社区《GaussDB(DWS)资源管理能力介绍与应用示例》，作者： 门前一棵葡萄树 。 一、资源管理能力 1.1 概述 数据库运行过程中使用的公共资源包含：系统资源（CPU、内存、网络等）和数据库共享资源(锁、计数
摘要：本文将探索内核中解析PE文件的相关内容。 本文分享自华为云社区《驱动开发：内核PE结构VA与FOA转换》，作者： LyShark 。 本章将探索内核中解析PE文件的相关内容，PE文件中FOA与VA、RVA之间的转换也是很重要的，所谓的FOA是文件中的地址，VA则是内存装入后的虚拟地址，RVA是
在mysql未支持json数据类型时，我们通常使用varchar、blob或text的数据类型存储json字符串，对mysql来说，用户插入的数据只是序列化后的一个普通的字符串，不会对JSON文档本身的语法合法性做检查，文档的合法性需要用户自己保证。在使用时需要先将整个json对象从数据库读取出来，在内存中完成解析及相应的计算处理，这种方式增加了数据库的网络开销并降低处理效率
首先，我们介绍了Elasticsearch（ES）的倒排索引，这是一种用于快速检索的数据结构。其次，我们了解了ES集群的架构，包括主节点、数据节点和协调节点的功能和作用。然后，我们探讨了中文分词器的选择，其中包括IK、HanLP和Jieba等常用的分词工具。接着，我们解释了写入数据和查询数据的工作原理，包括请求的分配和预处理，数据的存储和查询结果的处理过程。最后，我们讨论了ES部署的优化方法，包括调整JVM内存、分片布局和数量、节点身份设计以及配置Ingest节点等方面的策略。
作者：京东科技 韩国凯 一、问题发现与排查 1.1 找到问题原因 问题起因是我们收到了jdos的容器CPU告警，CPU使用率已经达到104% 观察该机器日志发现，此时有很多线程在执行跑批任务。正常来说，跑批任务是低CPU高内存型，所以此时考虑是FullGC引起的大量CPU占用（之前有类似情况，告知用
本文主要讲解了京东百亿级商品车型适配数据存储结构设计以及怎样实现适配接口的高性能查询。通过京东百亿级数据缓存架构设计实践案例，简单剖析了jimdb的位图(bitmap)函数和lua脚本应用在高性能场景。希望通过本文，读者可以对缓存的内部结构知识有一定了解，并且能够以最小的内存使用代价将位图(bitmap)灵活应用到各个高性能实际场景。
本篇主要介绍Java NIO的基本原理和主要组件 Netty是由JBOSS提供的Java开源网络应用程序框架，其底层是基于Java提供的NIO能力实现的。因此为了掌握Netty的底层原理，需要首先了解Java NIO的原理。 NIO简介 计算机主要由CPU、内存、外存、IO设备等硬件组成，计算机执行
最近有一个朋友问我这样一个问题： 我的业务依赖一些数据，因为数据库访问慢，我把它放在Redis里面，不过还是太慢了，有什么其它的方案吗？ 其实这个问题比较简单的是吧？Redis其实属于网络存储，我对照下面的这个表格，可以很容易的得出结论，既然网络存储的速度慢，那我们就可以使用内存RAM存储，把放Re
曾经梦想仗剑走天涯，如今却在写字楼里安家。他乡容不下灵魂，家乡容不下肉体，还面临着35岁被毕业，这难道就是程序员的宿命？
路由信息协议RIP(Routing Information Protocol)是内部网关协议IGP中最先得到广泛使用的协议，其相关标准文档为RFC1058。 一、RIP基本工作原理 RIP要求自治系统AS内的每一个路由器都要维护从它自己到AS内其他每一个网络的距离记录。这是一组距离，称为“距离向量D
免责申明 以下内容仅供学习使用，非法使用造成的问题由使用人承担 攻击思路 漏洞探测（信息收集） <- fsacn,namp | 漏洞利用 <- 工具（msf等） | 获取服务器权限 MSF 使用 Metasploit就是一个安全漏洞检测工具。它的全称叫做The Metasploit Framewor
https://www.bilibili.com/read/cv16655736/ systemtap是内核开发者必须要掌握的一个工具，本文我将简单介绍一下此工具，后续将会有系列文章介绍systemtap的用法。 什么是systemtap 假如现在有这么一个需求：需要获取正在运行的 Linux 系统
https://blog.mygraphql.com/zh/notes/low-tec/kernel/5-sync/synchronizeation-primitives/ 什么是同步原语 共享内存，多进程/线程的运行期设计模式已成主流的今天，你有好奇一下，进程/线程间的怎么同步的吗？大部分人知道，
内核参数作用域的情况 1. 全系统生效 2. 进程生效 3. 用户生效 4. 协同作用. # 本文并不会按照范围进行单独阐述 # 会按照一个作用链条进行说明. nofile number of file 本质是一个进程能够打开文件数的限制. 是操作系统避免单个线程文件数打开过多,导致系统资源耗尽的一
net.ipv4.tcp_timestamps= 1 #服务器时间截，默念为1 net.ipv4.tcp_tw_reuse= 1 #服务器作为客户端时起作用，开启后time_wait在一秒内回收，（两端都要开启tw_timestamps=1时才有效） net.ipv4.tcp_tw_recycle=
https://cloud.tencent.com/developer/article/1993859?areaSource=&traceId= Linux系统下，TCP连接断开后，会以 TIME_WAIT 状态保留一定时间，然后才释放端口。当并发请求过多时，会产生大量 TIME_WAIT 状态连接
内部开发者门户（internal developer portal）是一个自助服务的应用程序和数据存储，可以为软件工程团队提供提供访问所有软件组件、资源、环境、工具和文档的能力，让开发人员和管理人员跟踪并组织其工程团队构建和运行的所有内容。 信息碎片化问题常常困扰着运行复杂分布式系统的软件工程组织，
内部开发者门户和内部开发者平台是两个密切相关的概念。通过之前的文章，我们了解到这两个概念都旨在通过提供一个自助服务层，抽象出底层技术栈的复杂性和多样性，来改善开发者的体验和生产力。然而，它们有着不同的范围和功能，且能够相互补充。 在这篇文章中，我们将探讨这两者的相似之处、差异，以及二者对现代软件开发
