本文由葡萄城技术团队于博客园原创并首发 转载请注明出处：葡萄城官网，葡萄城为开发者提供专业的开发工具、解决方案和服务，赋能开发者。 数据分析能力越来越成为消费者和企业的必备品应用程序，复杂程度各不相同，从简单地一个网页或门户上托管一个可视化或仪表板，到在一个云服务上实现数据探索、建模、报告和可视化创
 撇开一屏占四分之三屏幕的 AI 相关项目之外，本周剩下的热榜项目就是同数据有关的数据库项目，比如 CockroachDB
数据读取是第一步，只有成功加载数据之后，后续的操作才有可能。 pandas可以读取和导入各种数据格式的数据，如CSV，Excel，JSON，SQL，HTML等，不需要手动编写复杂的读取代码。 1. 各类数据源 pandas提供了导入各类常用文件格式数据的接口，这里介绍3种最常用的加载数据的接口。 1
数据集拆分是将一个大型的数据集拆分为多个较小的数据集，可以让数据更加清晰易懂，也方便对单个数据集进行分析和处理。 同时，分开的数据集也可以分别应用不同的数据分析方法进行处理，更加高效和专业。 数据集合并则是将多个数据集合并成一个大的数据集，可以提供更全面的信息，也可以进行更综合的数据分析。 同时，数
数据类型是计算机编程中将不同类型的数据值分类和定义的方式。 通过数据类型，可以确定数据的存储方式和内存占用量，了解不同类型的数据进行各种运算的能力。 使用`pandas`进行数据分析时，最常用到的几种类型是： 1. 字符串类型，各类文本内容都是字符串类型 2. 数值类型，包括整数和浮点数，可用于计算
数组索引是指在`numpy`数组中引用特定元素的方法。`numpy`的数组索引又称为`fancy indexing`，比其他编程语言的索引强大很多。 # 1. 选取数据 numpy的索引除了像其他语言一样选择一个元素，还可以间隔着选取多个元素，也可以用任意的顺序选取元素。 比如一维数组： ```py
网络的度分布p(k)表示了一个随机选择的节点拥有度k的概率。我们设度为k的节点数目Nk =#nodes with degree k，除以节点数量N则可得到归一化后的概率质量分布 p(k) = Nk/N。图的路径(path)指一个节点序列，使得序列中的每个节点都链接到序列中的下一个节点，一个路径可以通过经过同一条边多次而和它自身相交。
自动微分技术（称为“automatic differentiation, autodiff”）是介于符号微分和数值微分的一种技术，它是在计算效率和计算精度之间的一种折衷。自动微分不受任何离散化算法误差的约束，它充分利用了微分的链式法则和其他关于导数的性质来准确地计算它们。我们可以选择定义一种新的数据类型来存储[u,u′]和[v,v′]这类数对。我们可以在这些数对上定义一种代数运算，这些代数运算编码了一些经典的操作。
数论导论 快速幂 求 $a^b\bmod p$ 的结果。 我们可以构造如下算法： $a^b=\begin{cases}(a^{\frac b2})^2 &\texttt{b is even}\a(a^{\frac{b-1}2})^2&\texttt{b is odd}\end{cases}$ 每次
# 林学长讲课笔记 ## 极限 $\lim_{x \to x_0} f(x)$ 考虑运算法则： - 一般来说，函数的和差商积的极限等于函数的极限的和差商积。 但是例外： $$ \lim_{x \to 3} \frac {x - 3}{x^2 - 9} $$ 考虑极限约去 $x - 3$ 得到： $$
摘要：本文主要描述下函数在满足特征的前提下可以把函数属性定义为下推属性。 本文分享自华为云社区《GaussDB(DWS)性能调优：函数下推》，作者：譡里个檔 。 DWS作为MPP架构的数仓产品，其性能优势主要在分布式计算上。默认情况下，DWS为了保证结果的正确性，自定义函数默认属性是不下推的，这会导
摘要：伴随云计算的迅猛发展，数据库也进入了云时代。云数据库不断涌现，产品越来越成熟和智能，作为数据库管理员的DBA将面临哪些机遇和挑战？又应该具备什么能力，才能应对未来的不确定性？ 本文分享自华为云社区《云数据库时代，DBA将走向何方？》，作者： GaussDB 数据库。 伴随云计算的迅猛发展，数据
摘要：GaussDB（for Influx）是一款基于计算存储分离架构，完全兼容 InfluxDB 生态的云原生时序数据库。 本文分享自华为云社区《云数据库 GaussDB(for Influx) 解密第十一期：让智能电网中时序数据处理更高效》，作者：华为云数据库 GaussDB（for Influ
摘要：用户使用Mogdb 2.0.1版本进行业务上线测试，发现在插入数据时，应用日志中提示primary key冲突，用户自查业务SQL没有问题，接到通知后，招手处理故障。 本文分享自华为云社区《使用MTK迁移Mysql源库后主键自增列导致数据无法插入问题》，作者：Gauss松鼠会。 故障背景 用户
摘要：集群运行过程中，根据集群的综合负载和业务接入情况进行分析：增加CN可以适当降低CPU消耗，增大接入连接数，分散CN节点业务压力，根据实际情况来识别是否要增加CN,如果是提升集群容量和扩展比能力，建议进行扩容操作。 本文分享自华为云社区《【玩转PB级数仓GaussDB(DWS)】在线运维-在线增
摘要：你知道数仓是如何应运而生的吗？你了解数仓未来的发展趋势吗？想知道国内数仓专家的看法吗？ 导语 数据仓库的发展一直是备受关注的议题，随着近年来技术的不断演进，数仓也在更新迭代。 你知道数仓是如何应运而生的吗？你了解数仓未来的发展趋势吗？想知道国内数仓专家的看法吗？ 今天我们邀请到了华为云数据仓库
摘要：本文主要讲解数仓运维中遇到单SQL磁盘空间管控问题的解析和方案。 本文分享自华为云社区《GaussDB(DWS)运维 -- 单SQL磁盘空间管控》，作者： 譡里个檔。 【问题描述】 执行部分SQL语句时出现如下报错信息(具体数值可能因为配置有差异)，本文针对根因和场景触发场景，确定触发此类问题
摘要： 介绍如何设置采样大小和表级控制analyze。 本文分享自华为云社区《GaussDB(DWS) 如何表级控制analyze》，作者：leapdb。 一、控制采样大小 【设置全局采样大小】 通过参数default_statistics_target设置全局默认采样大小。 a.default_s
摘要：SSRF (Server-Side Request Forgery，服务器端请求伪造)是指由攻击者构造请求，然后利用服务器的漏洞以服务端的身份向内网发送请求对内网发起攻击。 本文分享自华为云社区《GaussDB(DWS)安全测试之SSRF漏洞》，作者： ACBD。 1. 什么是SSRF漏洞 S
摘要：gdb确认是否安装，所带来的该工具用户数据库实例触发core问题后集群状态反复异常，对此问题及时分析根因并及时进行规避。 本文分享自华为云社区《主动预防-DWS关键工具安装确认》，作者：上官寒雨。 【关键工具确认】 1、gdb确认是否安装（该工具用户数据库实例触发core问题后集群状态反复异常
