本文将学术界和工业界的纠删码技术的核心研究成果进行了相应的梳理，然后针对公司线上存储系统的纠删码进行分析，结合互联网企业通用的IDC资源、服务器资源、网络资源、业务特性进行分析对原有纠删码技术进行优化和微创新，提出了融合EC整体方案以及可落地的RS+LRC+中间结果优化+并行修复跨AZ带宽设计方案，为后续的工程实践提供重要原理和架构支撑。
本文分享自华为云社区《Ascend算子开发入门笔记》，作者： JeffDing 。 基础概念 什么是Ascend C Ascend C是CANN针对算子开发场景推出的编程语言,原生支持C和C++标准规范，最大化匹配用户开发习惯；通过多层接口抽象、自动并行计算、孪生调试等关键技术，极大提高算子开发效率
同步算法的共性是所有的节点会以一定的频率进行全局同步。然而，当工作节点的计算性能存在差异，或者某些工作节点无法正常工作（比如死机）的时候，分布式系统的整体运行效率不好，甚至无法完成训练任务。为了解决此问题，人们提出了异步的并行算法。在异步的通信模式下，各个工作节点不需要互相等待，而是以一个或多个全局服务器做为中介，实现对全局模型的更新和读取。这样可以显著减少通信时间，从而获得更好的多机扩展性。
摘要：ForkJoin是由JDK1.7之后提供的多线程并发处理框架。 本文分享自华为云社区《【高并发】什么是ForkJoin？看这一篇就够了！》，作者： 冰 河。 在JDK中，提供了这样一种功能：它能够将复杂的逻辑拆分成一个个简单的逻辑来并行执行，待每个并行执行的逻辑执行完成后，再将各个结果进行汇总
阅识风云是华为云信息大咖，擅长将复杂信息多元化呈现，其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要：MapReduce是Hadoop的核心，是Google提出的一个软件架构，用于大规模数据集（大于1TB）的并行运算。概
阅识风云是华为云信息大咖，擅长将复杂信息多元化呈现，其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要：Flink是一个批处理和流处理结合的统一计算框架，其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮
本文主要介绍在业务复杂化背景下，京东零售购物车团队努力践行工匠精神，通过全异步化改造提升系统性能、提升用户体验。通过本文，读者可以了解购物车中台进行全异步化改造的总体方案，以及方案落地过程中遇到的问题及解决方法，读者可重点关注文中提到的多分页并行后，分页精细控制及底层RPC异常信息问题。
例题 一共有 \(n\) 个数，编号是 \(1 \sim n\)，最开始每个数各自在一个集合中。 现在要进行 \(m\) 个操作，操作共有两种： M a b，将编号为 \(a\) 和 \(b\) 的两个数所在的集合合并，如果两个数已经在同一个集合中，则忽略这个操作； Q a b，询问编号为 \(a\
京东云 已认证帐号 已关注 1 背景 关键词：并发、丢失更新预收款账户表上有个累计抵扣金额的字段，该字段的含义是统计商家预收款账户上累计用于抵扣结算成功的金额数。更新时机是，账单结算完成时，更新累计抵扣金额=累计抵扣金额+账单金额。 2 问题及现象 发现当账单结算完成时，偶尔会发生累计抵扣金额字
https://www.jianshu.com/p/f5f5f99e2417 一、背景 2021年2月，收到反馈，视频APP某核心接口高峰期响应慢，影响用户体验。 通过监控发现，接口响应慢主要是P99耗时高引起的，怀疑与该服务的GC有关，该服务典型的一个实例GC表现如下图： image image
https://zhuanlan.zhihu.com/p/344083588 做为一个有追求的程序员，不能只满足增删改查，我们要对系统全方面无死角掌控。掌握了这些基本的网络知识后，相信一方面日常排错中会事半功倍，另一方面日常架构中不得不考虑的高并发问题，理解了这些底层协议也是会如虎添翼。 本文不会单
项目中有一个批处理任务，用来删除数据库中过期的数据（包括说话人的语音、模型、记录等），当程序被分布式部署后，就会有多个批处理线程同时进行删除，不过不同的线程，会根据元信息表得到不同的说话人信息，从而删除不同的数据，并不存在竞争的问题，但是，当项目使用oracle数据库在线上运行时，却频繁出现了ORA
https://juejin.cn/post/6844903702327721992 0 前言 在很多情况下，访问一个程序变量（对象实例字段，类静态字段和数组元素）可能会使用不同的顺序执行，而不是程序语义所指定的顺序执行。具体几种情况，如下： 编译器 能够自由的以优化的名义去改变指令顺序； 在特定的
函数说明 函数原型 #include int sched_yield(void); 12 sched_yield的作用是让出处理器，调用时会导致当前线程放弃CPU，进程管理系统会把该线程放到其对应优先级的CPU静态进程队列的尾端，然后一个新的线程会占用CPU。详细说明可以查看ma
开发和运维高并发系统的工程师可能都有过类似经验，明明系统已经调优完毕，该异步的异步，该减少互斥的地方引入无锁，该减少IO的地方更换引擎或者硬件，该调节内核的调节相应参数，然而，如果在系统中引入实时监控，总会有少量响应的延迟高于均值，我们把这些响应称为尾延迟（Tail Latency）。对于大规模分布
摘要：Tomcat作为最常用的Java Web服务器，随着并发量越来越高，Tomcat的性能会急剧下降，那有没有什么方法来优化Tomcat在高并发环境下的性能呢？ 本文分享自华为云社区《【高并发】高并发环境下优化Tomcat性能》，作者： 冰 河 。 写在前面 Tomcat作为最常用的Java We
作者：谢益培 1 背景 关键词：并发、丢失更新 预收款账户表上有个累计抵扣金额的字段，该字段的含义是统计商家预收款账户上累计用于抵扣结算成功的金额数。更新时机是，账单结算完成时，更新累计抵扣金额=累计抵扣金额+账单金额。 2 问题及现象 发现当账单结算完成时，偶尔会发生累计抵扣金额字段值更新不准确的
现代互联网很多业务场景，比如秒杀、下单、查询商品详情，最大特点就是高并发，而往往我们的系统不能承受这么大的流量，这时候限流熔断就发挥作用了，限制请求数，快速失败，保证系统满负载又不超限。本文为大家介绍几种常见的限流算法及方案
并发指同一时间内进行了多个线程。并发问题是多个线程对同一资源进行操作时产生的问题。通过加锁可以解决并发问题，ReentrantLock是锁的一种。
CompletableFuture对象是JDK1.8版本新引入的类，这个类实现了两个接口，一个是Future接口，一个是CompletionStage接口。
