云数据仓库 PostgreSQL

云数据仓库 PostgreSQL 官方专栏
19 篇文章
117 人订阅

全部文章

lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum性能优化之路 --(三)ANALYZE

基于规则的优化器,就是优化器在优化查询计划的时候,是根据预先设置好的规则进行的,这些规则无法灵活改变。举个例子,索引优先于扫描,这是一个规则,优化器在遇到所有可...

31252
lambgong

腾讯云 · 高级工程师 (已认证)

EMR数据导入Snova云数仓

在数据仓库的建设中,通常我们使用Hive处理原始数据(PB级别),进行耗时较长的ETL工作,再将结果数据(TB级别)交由准实时的计算引擎(如Snova)对接BI...

19762
lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum数据导入系列 -- (二)数据库实时同步

Greenplum作为数据仓库的计算引擎,其数据来源多是业务数据,其中以MySQL为主。那如何将数据从MySQL同步到Greenplum中?如果是离线同步,比如...

82862
lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum数据导入系列 -- (一)DataX

Greenplum(以下简称GP)支持多种数据导入方法,比如GP自带的gpfdist,通过gpfdist+外部表的形式将远端服务器上的数据并行导入到GP中,再比...

1.6K124
洛杉矶

腾讯 · 高级工程师 (已认证)

基于Azkaban的任务定时调度实践

Azkaban是LinkedIn开源的任务调度框架,类似于JavaEE中的JBPM和Activiti工作流框架。

7.8K61
lambgong

腾讯云 · 高级工程师 (已认证)

自建Greenplum迁移到Snova云数仓

Snova是腾讯云上的一款数仓产品,兼容Greenplum 开源数据仓库,是一种基于 MPP(大规模并行处理)架构的数仓服务。

7.2K82
洛杉矶

腾讯 · 高级工程师 (已认证)

基于云上scf的定时任务设计方法

腾讯云无服务器云函数(Serverless Cloud Function,SCF)是腾讯云为企业和开发者们提供的无服务器执行环境。

7.4K71
alexcqtan

腾讯 · 助理工程师 (已认证)

DataX使用记录

Greenplum(以下简称GP)支持多种数据导入方法,比如GP自带的gpfdist,通过gpfdist+外部表的形式将远端服务器上的数据并行导入到GP中,再比...

3.7K51
lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum性能优化之路 --(二)存储格式

Greenplum(以下简称GP)有2种存储格式,Heap表和AO表(AORO表,AOCO表)。

11.6K4216
lambgong

腾讯云 · 高级工程师 (已认证)

MySQL用户入门Greenplum

Greenplum(以下简称GP)是基于PostgreSQL的MPP数据库。在使用方式和语法上和PostgreSQL基本一致,而PostgreSQL与MySQL...

81081
洛杉矶

腾讯 · 高级工程师 (已认证)

Greenplum基于pgbench的性能测试

https://github.com/gregs1104/pgbench-tools

94661
lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum性能优化之路 --(一)分区表

分区表就是将一个大表在物理上分割成若干小表,并且整个过程对用户是透明的,也就是用户的所有操作仍然是作用在大表上,不需要关心数据实际上落在哪张小表里面。Green...

13K141
洛杉矶

腾讯 · 高级工程师 (已认证)

Greenplum资源队列初识

在Greenplum的4.x版本之后,加入了资源队列的概念,其主要作用就是限制用户或者单个SQL对资源的消耗。避免出现消耗过多资源,影响其他用户或者SQL计算。...

1.6K151
lambgong

腾讯云 · 高级工程师 (已认证)

Snova客户端工具

Snova客户端工具目前包含pg_dump,pg_dumpall ,psql 3个可执行文件。

39541
洛杉矶

腾讯 · 高级工程师 (已认证)

Greenplum的HA实践

GP集群的 Primary MasterA节点部署一个备份节点,即Slava Master B节点。

1.5K82
lambgong

腾讯云 · 高级工程师 (已认证)

云数据仓库 PostgreSQL COS使用经验

Snova云数仓支持直接分析或者导入腾讯对象存储COS里的数据,本文列举了在使用COS场景下的一些技巧和注意事项。

8.4K126
lambgong

腾讯云 · 高级工程师 (已认证)

Greenplum中对表批量授权

DBA在管理数据仓库的时候,往往会创建多个帐号,每个帐号有不同的用途。因此这里就有不同帐号间表授权的需求。

93871
洛杉矶

腾讯 · 高级工程师 (已认证)

gpexpand分析

具体包括不限于以下内容: 创建用户名,设置环境变量,创建数据目录,安装greenplum软件包,解压目录路径。

3.7K71
Snova官方账号

Snova添加子用户及策略操作指南1

在用户列表中,选择需要授权的子用户。关联snova相关读写权限。策略关联成功后,子用户即获取相关资源权限。

27381

扫码关注云+社区

领取腾讯云代金券

http://www.vxiaotou.com