强人随笔平安科技PostgreSQL案例分享|进程私有内存探密

近期遇到一个案例,一个分析型应用的DB在早上的时候出现OOM,OS kill用户进程,数据库进入recovery,几十秒后数据库恢复。

redraiment 发布于 2019-03-19 08:30:29
评论:0    浏览:5490

商业活动Qunar诚聘PostgreSQL/GreenPlum DBA

Qunar诚聘PostgreSQL/GreenPlum DBA

redraiment 发布于 2019-03-17 23:54:23
评论:0    浏览:4053

强人随笔PostgreSQL 11新特性解读|支持存储过程(SQL Stored Procedures)

PostgreSQL 11 版本一个重量级新特性是对存储过程的支持,同时支持存储过程嵌入事务,存储过程是很多 PostgreSQL 从业者期待已久的特性,尤其是很多从Oracle转到PostgreSQL朋友,尽管PostgreSQL提供函数可以实现大多数存储过程的功能,但在函数中无法执行事务实现部分提交,换句话说,函数中的SQL要么都执行成功,要不全部返回失败。 PostgreSQL 11 版本对存储过程的支持,从兼容层面考虑和Oracle的兼容性进一步增强,本文演示下PostgreSQL存储过程的创建和调用,并且演示存储过程支持嵌入事务样例。

redraiment 发布于 2019-03-12 08:57:57
评论:0    浏览:7661

强人随笔Postgres 12 highlight - SKIP_LOCKED for VACUUM and

Postgres 11已经扩展了VACUUM,因此可以在单次查询中指定多张表,每次处理一张表。但是当VACUUM卡在一张表上很长时间,由于表被锁或者别的原因时,应由触发VACUUM的应用层仔细查看并解除阻塞情况。SKIP_LOCKED通过立即跳过任何在VACUUM或者ANALYZE处理开始时无法锁定的表,实现了对这种场景的更多控制,这意味着这种处理方式将可能以不做任何事情为代价及时完成,如果表不断累积膨胀而不被清理,这也可能是危险的。

redraiment 发布于 2019-03-09 10:35:02
评论:0    浏览:4789

社区活动云栖TechDay - PG天天象上活动 - 长沙站

贸易摩擦、中兴事件、以及近期某银行收到Oracle 6亿罚单等等的热点事件,引发了企业对核心技术安全合规、自主可控的深度思考。对于数据库来说,安全合规、自主可控,成本等也已经成为绝大多数企业迫在眉睫要解决的问题。

doudou586 发布于 2019-03-08 09:11:23
评论:1    浏览:4635

其他PG_PERMISSION_检查您的PostgreSQL安全系统

安全性是一个很重要的话题。它不仅仅只存在于PostgreQL中,整个IT系统中都是如此。然而数据库会有特殊的安全要求。数据库通常存放的是机密数据,因此数据得到合适的保护是有意义的。安全第一!

doudou586 发布于 2019-03-06 12:59:58
评论:0    浏览:4725

社区活动深度培训:PostgreSQL技术实战

本次深度培训课程是由DTCC2019大会新增的一个培训环节。课程将从企业应用项目选型实施角度出发,全面而深入地向企业传达:针对某个应用方案的具体实现、选型比较、实现策略、成本对比、优势优点、自我经验,教训总结等内容。 时间:2019.5.11~2019.5.12 、 德哥于北京新云南皇冠酒店开课

doudou586 发布于 2019-03-06 08:28:04
评论:0    浏览:5001

技术讨论GPkafka-Kafka数据导入GreenPlum实践

Kafka是分布式消息订阅系统,有非常好的横向扩展性,可实时存储海量数据,是流数据处理中间件的事实标准。当通过Kafka和greenplum搭建流处理管道时,如何高速可靠的完成流数据加载,成为用户最关心的问题。

doudou586 发布于 2019-03-04 20:59:39
评论:2    浏览:13144

强人随笔PostgreSQL中的并行查询

现代CPU的内核数量愈发可观。多年来,应用程序一直在向数据库并行发送查询。如果查询处理许多行数据,使用多核的能力有助于查询更快地执行。PostgreSQL中的并行查询允许我们利用多核来更快地完成报表查询(reporting queries)。并行查询功能在9.6中实现,从PostgreSQL 9.6开始,报表查询能够并行使用多核,高效完成查询。 并行查询执行的初始实现花了三年时间。并行的支持需要在许多查询执行阶段进行代码更改。PostgreSQL 9.6为进一步的代码改进创建了一个基础架构。更高版本则扩展了对其他查询类型的并行执行支持。

redraiment 发布于 2019-02-28 15:52:37
评论:0    浏览:10579

强人随笔如何估算maintenance_work_mem内存大小?

`maintenance_work_mem`控制在两种不同场景下系统将分配的内存总量,这两种场景基本上毫不相干。首先,它控制系统在构建索引时将使用的最大内存量。为了构建一个B树索引,必须对输入的数据进行排序,如果要排序的数据在`maintenance_work_mem`设定的内存中放置不下,它将会溢出到磁盘中。起码在我的个人经验中,这不会成为一个大问题。索引构建很少发生在安装过程中,通常是手动发起的,因此,如果你确定增加该配置值有助于提升你所在环境的性能,那么,在执行CREATE INDEX命令之前,你可以在本地会话中使用SET命令增加该值。`maintenance_work_mem`所做的第二件事是控制vacuum进程将分配的内存量,以存储那些无效索引元组的TID。

redraiment 发布于 2019-02-25 15:42:13
评论:0    浏览:9447

强人随笔布道PostgreSQL让开源数据库在中国开花结果

撒下什么种,就会结什么果。最近2015-2018年PostgreSQL中国用户会轮席主席、阿里云高级产品专家萧少聪接受中国软件网记者采访时认为,从传统业界巨头,到云及互联网新霸主,再到PostgreSQL社区生态,各类公司都十分活跃,在全球包括中国涌现出大批基于PostgreSQL的商业公司。不过当前市场上的竞争还只于萌芽阶段,而带动PostgreSQL产品的开发者及周边工具发布,将会成为竞争的焦点。

redraiment 发布于 2019-02-20 09:33:47
评论:0    浏览:5844

强人随笔一个奇异的WAL文件分裂案例

在过去八年我使用Postgres流复制的过程中,我遇到过大约两次这样的场景:由于一个WAL文件已经在主服务器上被移除,后备机上的复制无法继续,因此它会执行B计划,也就是尝试使用restore_command来取得相关的WAL文件(假定归档已被设置好并且工作正常),但是在重放取得的文件时,我们听到了另一个牢骚:“No such file or directory.”

redraiment 发布于 2019-01-29 22:12:39
评论:0    浏览:5956

热点话题微软收购Citus Data!再次肯定对开源的承诺,并加速AzurePostgreSQL的性能和扩展

数据和分析越来越多地成为数字化转型的中心,最先进的企业利用数据来推动客户获取和满意度、长期战略规划以及新市场扩张。 这场数字革命正在对技术解决方案提出令人难以置信的需求,使其更加开放、灵活和可扩展,以满足大数据量,亚秒级响应时间和分析驱动的业务洞察力的需求。

redraiment 发布于 2019-01-25 08:44:51
评论:0    浏览:6933

强人随笔如何为PostgresQL做贡献?

经常会遇到这个问题:“我如何为Postgres做贡献?”。PostgreSQL是一个很棒的开源数据库,具有非常良好的代码基础,对于我们许多技术人来说,贡献和回馈开源亦是一件值得骄傲的事儿。关于回馈Postgres,您通常不会立即提交代码和实现您贡献PostgreSQL的良好愿望。因此,从哪里开始为Postgres作出贡献很关键。如果您正在考虑更多地参与Postgres,我有一些对您可能有用的提示。

redraiment 发布于 2019-01-23 10:19:23
评论:0    浏览:5331

强人随笔PostgreSQL MVCC快照机制浅析

快照隔离是数据库实现并发控制的一种常用技术。本文简单探讨了快照理论模型、PostgreSQL的工程实践以及由此推广至Postgres-XL的可能改进思路等。

redraiment 发布于 2019-01-22 09:50:54
评论:0    浏览:7766

强人随笔PostgreSQL 何以蝉联db-engines 2017、2018年度数据库大奖?

PostgreSQL如何能蝉联db-engines 2017、2018年度数据库大奖?PG为什么如此倍受企业欢迎?

redraiment 发布于 2019-01-17 23:59:49
评论:0    浏览:5453

强人随笔如何打造 PostgreSQL 闪回环境?

在 PostgreSQL 数据库;目前是不支持类似 Oracle 闪回特性;我们知道 Oracle 闪回特性在数据恢复是非常简单给力。增加数据库操作人员(开发,DBA)的容错率。

redraiment 发布于 2019-01-16 02:20:58
评论:0    浏览:6908

强人随笔再谈PostgreSQL的膨胀和vacuum机制及最佳实践

这两天有两篇专门介绍PostgreSQL的vacuum机制的技术文章,得到了比较热烈和正面的反馈,让用户可以比较清楚地理解和使用这个特性。

redraiment 发布于 2019-01-16 02:17:03
评论:0    浏览:6581

社区活动PostgreSQL中文社区官方微店开业(内有福利)

七年不痒,初心未改:2018年PostgreSQL中国技术大会于12月16日圆满落幕,但小伙伴们的热情不减,好多PGer对没有得到大会纪念款卫衣深表遗憾,告诉大家一个好消息,PostgreSQL中文社区官方微店开业啦!预订2018大象汇特别定制纪念款卫衣,原价399元,拼团价只要369元,不仅有面,并且还很暖和!拼团截止日期 :2019年1月20日,预计发货日期:2019年1月28日。

redraiment 发布于 2019-01-16 02:09:39
评论:0    浏览:4724

强人随笔PostgreSQL高级扩展之IP4R

虽然PostgreSQL已有内置数据类型 'inet' 及 'cidr', 但本模块的作者发现一些内置数据类型没有解决的问题。

redraiment 发布于 2019-01-09 21:32:05
评论:0    浏览:5750
© 2010 PostgreSQL中文社区