在经过深思熟虑后，我们计划发起名为wind rises的项目孵化，在 .NET 平台上尽力弥补缺少云原生基础设施项目的遗憾。 在今年的最后几个月和明年，我们规划了使用 .NET 开发的可观测性平台和分布式应用框架两个项目
文章贡献者 Authors 技术指导: 泰康人寿 数据架构资深专家工程师 王可 文章作者: 泰康人寿 数据研发工程师 田昕峣 摘要 Abstract 本文详细介绍了泰康人寿基于 Apache Hudi 构建湖仓一体分布式数据处理平台的技术选型方法、整体架构设计与实施、以及针对大健康领域的领域特征和公
.NET生成的GUID唯一性很好，用之方便，但是，缺少像雪花算法那样的有序性。虽然分布式系统中做不到绝对的有序，但是，相对的有序对于目前数据库而言，索引效率等方面的提升还是有明显效果的（当然，我认为，这是数据库的问题，而非编程的问题，数据库应该处理好任何类型数据作为主键索引时的性能，除非在SQL标准...
1.概述 随着大数据技术的不断发展，处理海量数据的需求变得愈发迫切。MapReduce作为一种分布式计算模型，为处理大规模数据提供了有效的解决方案。在这篇博客中，我们将探讨如何使用MapReduce框架读取快照表（Snapshot Table）的数据。快照表是一种记录某一时刻系统状态的表格，通过Ma
Merkle 树（Merkle Tree）是一种树状数据结构，通常用于验证大规模数据集的完整性和一致性。它的名字来源于其发明者 Ralph Merkle。Merkle 树在密码学、分布式系统和区块链等领域得到广泛应用，尤其在区块链中，它用于验证交易和区块的完整性，确保数据不被篡改。 下面是 Merk
转载请注明出处： 1.Google的三篇论文 2003年，Google发布Google File System论文，(GFS)这是一个可扩展的分布 式文件系统，用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价 的普通硬件上，提供容错功能。从根本上说：文件被分割成很多块，使用冗余的方 式储
MySQL 和 Elasticsearch 是两种不同的数据管理系统，它们各有优劣，适用于不同的场景。本文将从以下几个方面对它们进行比较和分析： - 数据模型 - 查询语言 - 索引和搜索 - 分布式和高可用 - 性能和扩展性 - 使用场景 ## 数据模型 MySQL 是一个关系型数据库管理系统（R
摘要：计算侧需要一个高速的缓存层来消除计算集群和OBS之间的数据访问鸿沟。为了解决这个问题，提出MemArts CC分布式客户端缓存。 本文分享自华为云社区《华为云全新缓存生态组件MemArts》，作者： MichaelYun。 公有云的基础设施都是基于存算分离的架构，即计算任务运行在计算集群的虚拟
本文分享自华为云社区《KAFKA EAGLE 监控MRS kafka之操作实践》，作者： 啊喔YeYe 。 1.Kafka Eagle简介 Kafka eagle 是一款分布式、高可用的kafka监控软件，提供丰富的kafka监控指标，例如：Kafka集群的Broker数、Topic数、Consum
摘要：对于数据库来说，性能一直被视为最关键的部分。GaussDB作为华为自主创新研发的分布式关系型数据库，那么华为云数据库GaussDB在提升数据库性能方面都有哪些黑科技呢？ 本文分享自华为云社区《【云图说】第275期 云数据库GaussDB如何做到卓越性能》，作者：阅识风云。 对于数据库来说，性能
摘要：2023年4月8日，Kurator正式发布v0.3.0版本。 本文分享自华为云社区《华为云 Kurator v0.3.0 版本发布！集群舰队助力分布式云统一管理》，作者：云容器大未来 。 2023年4月8日，Kurator正式发布v0.3.0版本。 Kurator 是华为云推出的分布式云原生开
摘要：近日，中国电子学会科学技术奖励大会颁发了2021-2022年度中国电子学会科学技术奖获奖项目，华为云主导的“GaussDB智能云原生分布式数据库”项目荣获“科技进步一等奖”。 本文分享自华为云社区《再获殊荣！华为云GaussDB喜提“科技进步一等奖”》，作者：GaussDB 数据库 。 近日，
这篇文章主要是介绍mosn在v1.5.0中新引入的基于延迟的负载均衡算法。对分布式系统中延迟出现的原因进行剖析，介绍mosn都通过哪些方法来降低延迟，构建来与生产环境性能分布相近的测试用例来对算法进行验证
## 一：场景 20w的QPS的场景下，服务端架构应如何设计？ ## 二：常规解决方案 可使用分布式缓存来抗，比如redis集群，6主6从，主提供读写，从作为备，不提供读写服务。1台平均抗3w并发，还可以抗住，如果QPS达到100w,通过增加redis集群中的机器数量，可以扩展缓存的容量和并发读写能
这篇文章讨论了认证和授权的概念，并探讨了设计权限认证框架的原则。它还比较了Cookie和Session的区别，并探讨了处理分布式部署时的Session保存问题。此外，文章还介绍了CSRF攻击及其防范方法，以及OAuth2.0、JWT令牌和SSO的概念。最后，文章提出了设计开放授权平台时需要考虑的因素。
SparkCore RDD基础 定义 在 Spark 的编程接口中，每一个数据集都被表示为一个对象，称为 RDD。RDD 是 Resillient Distributed Dataset(弹性分布式数据集)的简称，是一个只读的(不可变的)、分区的(分布式的)、容错的、延迟计算的、类型推断的和可缓
计算机单机性能一直受到摩尔定律的约束，随着移动互联网的兴趣，单机性能不足的瓶颈越来越明显，制约着整个行业的发展。不过我们虽然不能无止境的纵向扩容系统，但是我们可以分布式、横向的扩容系统，这听起来非常的美好，不过也带来了今天要说明的问题，分布式的节点越多，通信产生的成本就越大。 网络传输带宽变得越来越
在信息化快速发展的今天，企业运维面临的挑战日益增多。传统的运维监控系统往往存在功能冗余、性能低下、操作复杂等问题，难以满足现代企业对高效、稳定、智能的运维管理需求。 今天给大家推荐一款新一代极简运维监控系统：WGCLOUD 1、介绍 WGCLOUD是一个基于Java开发的高性能、高并发的分布式监控系
前言 今天我们很高兴宣布 CAP 发布 8.2 版本正式版，我们在这个版本中主要致力于对订阅着并行执行的特性提供支持，同时添加了对在订阅者中对消息头的控制行为。 下面，具体看一下我们新版本的功能吧。 总览 可能有些人还不知道 CAP 是什么，老规矩来一个简介。 CAP 是一个用来解决微服务或者分布式
Spring Cloud是一个相对比较成熟的微服务框架。虽然，Spring Cloud于2016年才推出1.0的release版本, 时间最短, 但是相比Dubbo等RPC框架, Spring Cloud提供的全套的分布式系统解决方案。 Spring Cloud是一系列框架的有序集合。它利用Spri
