强人随笔IP地址段查询深度优化案例

对于IP地址段查询的场景,PostgreSQL的ip4r插件是一个性能和通用性都比较不错的一个方案,但用户不一定方便使用ip4r,比如在未安装ip4r的公有云RDS上或者使用PostgreSQL以外的数据库

wangliyun 发布于 2019-09-09 08:06:00
评论:0   浏览:143

强人随笔PostgreSQL 12 新特性解读之二| CTE支持Inlined With Queries

PostgreSQL 的 CTE( common table expressions ) 支持较复杂的查询,比如递归查询等场景, 12 版本之前 CTE 的 WITH 语句都是直接物化的,也就是说 WITH 语句执行一次并保持到一个类似的临时表中,供 WITH 语句外层的SQL引用,当 INSERT/UPDATE/DELETE 做CTE的 WITH 语句时是非常恰当的。

wangliyun 发布于 2019-09-06 08:16:09
评论:0   浏览:195

强人随笔使用数据传输在PostgreSQL执行 外部连接运算符

随着传感技术的发展,关系数据库的重要性不断增加。大型天气测量望远镜(LSST)每晚产生20TB,大型强子对撞机(LHC)每年产生30PB的数据。 Google和Facebook等社交网络公司每天都会收集大量人为生成的数据。

wangliyun 发布于 2019-09-05 08:10:05
评论:0   浏览:158

强人随笔使用数据传输在PostgreSQL执行 外部连接运算符

随着传感技术的发展,关系数据库的重要性不断增加。大型天气测量望远镜(LSST)每晚产生20TB,大型强子对撞机(LHC)每年产生30PB的数据。 Google和Facebook等社交网络公司每天都会收集大量人为生成的数据。

wangliyun 发布于 2019-09-05 08:10:05
评论:0   浏览:152

强人随笔PostgreSQL死锁案例分析

在最近的生产环境巡检中,发现一个死锁错误。从日志中看,触发死锁的是对表的相同行操作,最终分析和业务操作有关,不过其中涉及到Postgres数据库的外键更新加锁处理逻辑,下面对这个问题展开详细分析。

wangliyun 发布于 2019-09-04 08:06:46
评论:0   浏览:161

强人随笔Docker与PostgreSQL 11.5系列文章(三)数据持久化

在学习完第一篇《Docker与PostgreSQL 11.5系列文章(一)Docker的安装》和第二篇《Docker与PostgreSQL 11.5系列文章(二)postgreSQL 11.5安装》之后,继续讨论容器的持久化。“持久化” 简单理解,就是容器被关闭后PostgreSQL数据库的数据是否还存在?

wangliyun 发布于 2019-08-29 08:07:44
评论:0   浏览:259

强人随笔Docker与PostgreSQL 11.5系列文章(二)PostgreSQL 11.5安装

上篇介绍容器相关的基本概念,介绍如何安装docker。如果不熟悉docker的安装,可回到系列文章的第一部分《Docker与PostgreSQL 11.5系列文章(一)Docker的安装》。第二部分主要介绍PostgreSQL11在容器中的安装和使用。

wangliyun 发布于 2019-08-28 08:04:42
评论:0   浏览:290

强人随笔Docker与PostgreSQL 11.5系列文章(一)Docker的安装

Docker前几年席卷了整个互联网,Docker在互联网很多业务场景都有使用。最近一两年,一些传统行业也在尝试使用,并且看到不少案例。另外,我们一直担心,容器影响数据库的性能,根据近些年的亲身实践,容器对数据库性能的影响很小,也不会影响数据库的并行性。因此,想写一系列文章,简单介绍PostgreSQL在容器中的实践。

wangliyun 发布于 2019-08-27 08:00:36
评论:0   浏览:286

强人随笔PostgreSQL数据库的智能存储

GPUDirect RDMA允许直接从PCIe设备到GPU RAM的对等数据加载。对于Linux内核和PostgreSQL的扩展模块,我们通过将NVMe-SSD上的数据库块加载到GPU RAM以及在GPU设备上执行SQL来协同利用此基础架构进行非常快速的表扫描。一旦数据块加载到GPU RAM上,内核函数就会根据提供的SQL(WHERE clause,JOIN和GROUP BY)减少数据大小。在结果中,CPU / RAM将获得比实际表大小小得多的数据大小,并且看起来存储在理解SQL的情况下智能地执行。根据基于SQL星型模式的基准测试,我们的功能可以在80秒内扫描351GB平台;这是大约4.5GB / s的查询处理吞吐量,比通常的文件系统基本I / O实现快2.5倍。此结果表明GPU对I / O密集型工作负载也很有价值,而不仅仅是计算密集型工作负载。

wangliyun 发布于 2019-08-23 08:13:26
评论:0   浏览:353

强人随笔PostgreSQL 12 新特性解读之一|支持 SQL/JSON path

PostgreSQL 之前版本已支持 Json 和 Jsonb 数据类型,支持非关系数据的存储和检索,如果 Json 数据较复杂(层级多、嵌套json、包含数组等 ),之前版本不能方便的检索 Json 数据元素值。 PostgreSQL 12 版本的一个重量级特性是新增 SQL/JSON path 特性,支持基于 Json 元素的复杂查询,文档上关于 SQL/JSON path 内容很丰富,本文仅演示简单的用例。

wangliyun 发布于 2019-08-14 08:04:02
评论:0   浏览:533

强人随笔PostgreSQL流复制案例分析 | Startup 进程waiting问题分析

Postgresql 11.2版本物理复制,startup 进程命令行有时会出现waiting 标识。本文分析了出现waiting 标识的原因。

wangliyun 发布于 2019-08-13 08:08:13
评论:1   浏览:458

强人随笔PG-Strom让PostgreSQL查询飞起来 --基于OpenShift-3.10的GPU加速

在OpenShift 3.9 GPU博客中,我们利用OpenShift上的机器学习框架进行图像识别。在OpenShift 3.10博客中的如何使用带有DevicePlugin的GPU中,我们安装并配置了支持GPU的OpenShift集群。在本部分中,我们将在集群上创建更复杂的工作负载-使用GPU加速数据库查询。

wangliyun 发布于 2019-08-09 08:12:40
评论:0   浏览:495

强人随笔解密AISWare AntDB为何选择基于PostgreSQL研发

一直以来都有人问我们,为啥要选择基于PostgreSQL进行产品研发,PostgreSQL相比MySQL在中国的用户群体还比较小,研发出来的产品客户会购买吗? 为啥不选择MySQL进行研发呢?今天就把咱们团队过去在技术选型上的所思所想通过这篇文章分享给大家。

wangliyun 发布于 2019-08-06 08:03:47
评论:0   浏览:383

强人随笔跨PostgreSQL大版本复制怎么做? | 逻辑复制

当需要升级PostgreSQL时,可以使用多种方法。为了避免应用程序停机,不是所有升级postgres的方法都适合,如果避免停机是必须的,那么可以考虑使用复制作为升级方法,并且根据方案,可以选择使用逻辑复制或物理(流)复制来处理此任务。我们来看看PostgreSQL中逻辑和物理复制之间的区别。然后,我们将更详细地探讨如何使用逻辑复制完成升级,并通过这样做,避免应用程序停机。在后面的文章中,我们将研究物理复制。我们已经在之前的系列文章中讨论了几种可用于升级或迁移旧版PostgreSQL到新版PostgreSQL版本的方法,使用pg_dumpall进行PostgreSQL升级和使用pg_dump/pg_restore进行PostgreSQL升级。但是,这两种方法都涉及到应用程序的停机时间。

wangliyun 发布于 2019-07-25 08:20:14
评论:0   浏览:352

强人随笔PostgreSQL 隐式类型转换探秘

本文通过与Oracle隐式类型转换的比较简要介绍了PostgreSQL中的隐式类型转换,包括Oracle隐式类型转换的机制、PostgreSQL隐式类型转换的机制和原理。

wangliyun 发布于 2019-07-13 08:15:17
评论:0   浏览:504

强人随笔2019全球PostgreSQL生态报告出炉,PG为何从RDBMS中脱颖而出?

PG是一款开源的关系型数据库,在过去30年中,其流行度从其活跃、忠诚且持续成长的社区中迅速飙升。根据DB-Engines的专家们给出的《DBMS of the Year》报告,PG已经连续两年蝉联世界“成长”最快数据库的名号。那么,是什么让PG如此出众,当今它又是如何被应用于实际生产?!我们在3月举行的Postgres Conference会议中找到了答案,在那里,我们采访了许多PG的用户、贡献者以及SQL/NOSQL数据库管理员。

wangliyun 发布于 2019-07-12 08:30:42
评论:0   浏览:657

强人随笔Optimize Slow Query in PostgreSQL

SQL 全名是结构化查询语言(Structured Query Language),是用于数据库中的标准数据查询语言。传统来讲,SQL 语言分为三个部分:

wangliyun 发布于 2019-07-11 14:22:27
评论:0   浏览:566

强人随笔PostgreSQL 子查询优化分享

在开发项目过程中,客户要求使用gbase8s数据库(基于informix),简单的分页页面响应很慢。排查发现分页sql是先查询出数据在外面套一层后再取多少条,如果去掉嵌套的一层,直接获取则很快。日常使用中postgresql并没有这样的操作也很快,这是为什么呢?

wangliyun 发布于 2019-07-09 08:25:58
评论:0   浏览:679

强人随笔EcoX-PostgreSQL高可用集群最佳实践(续)

EcoX数据库高可用集群管理系统软件,该软件包含数据库高可用、读写分离、负载均衡、连接池等功能,能够保证业务7*24小时连续运行,保证数据零丢失。 在上期我们已经介绍过如何全新搭建一个EcoX-PostgreSQL高可用系统,期间有很多用户咨询对于已有集群,用ECOX如何接管,所以这期我们介绍如何用ECOX集群管理系统对一个已有的PostgreSQL流复制集群进行高可用改造。

wangliyun 发布于 2019-07-02 08:20:40
评论:0   浏览:752

强人随笔基于GPU的PostgreSQL扩展,用于可扩展的高吞吐量模式匹配

许多领域需要大规模模式匹配以实现各种计算目标。匹配模式的细节变化很大,从索引到修剪到强力匹配。可扩展性通常是一个问题,因为内容和模式数据库越来越大,变成了TB级。这种增长受许多因素驱动,例如增加的数据库成员(例如,图像数量)以及越来越多的测量和测量编码大小。

wangliyun 发布于 2019-06-29 08:13:18
评论:0   浏览:554
© 2010 PostgreSQL中文社区