PostgreSQL 每周新闻 - 2021 年 10 月 24 日

发布于 2021-10-24,作者:PWN
PWN

PostgreSQL 每周新闻 - 2021 年 10 月 24 日

PostgreSQL 产品新闻

JDBC 42.3.0 已发布

pgmetrics 1.12,一个用于 PostgreSQL 指标的命令行工具,已发布

StackGres 1.0.0,一个用于在 Kubernetes 上运行 PostgreSQL 的平台,已发布。https://stackgres.io/

pgexporter 0.2.0,一个用于 PostgreSQL 的 Prometheus 导出器,已发布

pgAdmin4 6.1,一个用于 PostgreSQL 的 Web 和原生 GUI 控制中心,已发布

10 月份的 PostgreSQL 工作

https://archives.postgresql.org/pgsql-jobs/2021-10/

PostgreSQL 新闻

Planet PostgreSQL: https://planet.postgresql.org/

本周的 PostgreSQL 每周新闻由 David Fetter 为您带来

请在太平洋标准时间/太平洋夏令时周日下午 3:00 前将新闻和公告提交至 david@fetter.org。

已应用的补丁

Michaël Paquier 推送了

  • 修复 psql 新 TAP 测试中的可移植性问题。c0280bc 和 d9ddc50 在 001_basic.pl 中添加的测试直接调用 psql 命令,使其对环境敏感。其中一个问题是这些命令忘记了 -X 选项,导致所有测试在 psql 无法正确解析此文件时失败。TAP 测试应该以隔离的方式运行,不依赖于运行它们的环境。由于 PostgresNode::psql 已经提供了这些新测试所需的所有功能,因此请切换到该功能,而不是在需要与后端交互时调用普通的 psql 命令。该测试经过轻微重构,以便能够在 stdout 和 stderr 的预期模式之后进行检查,从而保持与以前相同的覆盖率。报告人:Peter Geoghegan 讨论:https://postgr.es/m/CAH2-Wzn8ftvcDPwomn+y04JJzbT=TG7TN=QsmSEATUOW-ZuvQQ@mail.gmail.com https://git.postgresql.org/pg/commitdiff/384f1abdb9b0f669279fcd57ba2173eb31724740

  • 在事务中止期间正确重置快照导出状态。在创建复制槽期间,与创建要导出的快照的事务在同一事务中生成的 ERROR 会使后端处于不一致的状态,因为关联的静态导出快照状态未在事务中止时重置,而仅在创建复制槽时 WAL 发送方收到的后续命令时重置。如果此会话尝试再次导出快照(例如在创建复制槽期间),则会导致不一致性失败。请注意,快照导出不能在事务块中发生,因此无需担心子事务中止时重置此状态。此外,这种不一致的状态不太可能显示给用户。例如,可能发生这种情况的一种情况是在构建要导出的初始快照时出现内存不足错误。Dilip 在尝试其他补丁时发现了这个问题,这导致了此代码路径中出现与 HEAD 无关的错误。作者:Dilip Kumar 审核人:Michael Paquier、Zhihong Yu 讨论:https://postgr.es/m/CAFiTN-s0zA1Kj0ozGHwkYkHwa5U0zUE94RSc_g81WrpcETB5=w@mail.gmail.com 回溯至:9.6 https://git.postgresql.org/pg/commitdiff/409f9ca4471331be0f77b665ff3a1836a41de5b3

  • 阻止 ALTER INDEX/TABLE index_name ALTER COLUMN colname SET (options)。此命令在带有列名的索引上运行的语法一直被解析器授权,并且从未记录过。自 911e702 以来,可以像 CREATE INDEX 一样定义 opclass 参数,这实际上破坏了 ALTER INDEX/TABLE 的旧情况,其中可以为索引定义关系级参数 n_distinct 和 n_distinct_inherited(请参阅 76a47c0 及其线程,其中已触及此点,但仍然未使用)。尝试在 v13 中执行此操作会导致索引变得不可用,因为有一个新的专用代码路径来加载 opclass 参数,而不是以前可用的关系级参数。请注意,可以通过手动更新目录来使关系恢复正常。此提交暂时禁用此命令,因为索引的列名没有任何意义,特别是在自动计算名称的索引表达式中。将来正确支持这种情况的一种方法是像 ALTER INDEX .. ALTER COLUMN .. SET STATISTICS 一样使用列号。分区索引已被阻止,但非分区索引尚未阻止。为这两种情况添加了一些测试。ANALYZE 中有一些代码强制在定义参数时将 n_distinct 用于索引表达式,但暂时将其删除,直到/如果有对此的支持(请注意,索引级参数以前在 pg_dump 中也没有支持),因此这只是死代码。报告人:Matthijs van der Vleuten 作者:Nathan Bossart、Michael Paquier 审核人:Vik Fearing、Dilip Kumar 讨论:https://postgr.es/m/17220-15d684c6c2171a83@postgresql.org 回溯至:13 https://git.postgresql.org/pg/commitdiff/fdd88571454e2b00dbe446e8609c6e4294ca89ae

  • 修复使用 OpenSSL 3.0.0 的 MSVC 构建。Visual Studio 的构建脚本无法正确检测到 3.0.0 构建,因为对第二位数字的检查失败。此处根据需要进行了调整,允许完成构建。请注意,文档中提到的 OpenSSL 的 MSI 对于 Win32 和 Win64 而言没有更改任何库名称,这使得此更改非常简单。报告人:htalaco,通过 github 审核人:Daniel Gustafsson 讨论:https://postgr.es/m/YW5XKYkq6k7OtrFq@paquier.xyz 回溯至:9.6 https://git.postgresql.org/pg/commitdiff/41f30ecc29c89285d3eecd435906c4e9cb048be4

  • 修复从模板数据库复制依赖项时 pg_shdepend 的损坏。为新数据库使用具有需要复制的共享依赖项的模板数据库会导致 pg_shdepend 损坏,因为使用槽插入的值的索引号存在差一的计算错误。由 e3931d0 引入的问题。监控其余代码,没有类似的错误。报告人:Sven Klemm 作者:Aleksander Alekseev 审核人:Daniel Gustafsson、Michael Paquier 讨论:https://postgr.es/m/CAJ7c6TP0AowkUgNL6zcAK-s5HYsVHVBRWfu69FRubPpfwZGM9A@mail.gmail.com 回溯至:14 https://git.postgresql.org/pg/commitdiff/98ec35b0bbf6003e89fc06aa140e12fd90bbad47

  • 文档:描述 pg_receivewal 的流式传输起点的计算方法。该文档对于使用 pg_receivewal 命令定义的本地存档目录中找不到任何内容时用于 WAL 流式传输的起始 LSN 的描述不准确,因此请更详细地说明此问题。从同一作者的较大补丁中提取。作者:Ronan Dunklau、Michael Paquier 讨论:https://postgr.es/m/18708360.4lzOvYHigE@aivenronan 回溯至:10 https://git.postgresql.org/pg/commitdiff/1e9475694b0ae2cf1204d01d2ef6ad86f3c7cac8

Heikki Linnakangas 推送了

Álvaro Herrera 推送了

Daniel Gustafsson 推送

  • 修复 pg_basebackup 和 pg_dump 中的 sscanf 限制。确保字符串解析受目标缓冲区大小的限制。在 pg_basebackup 中,服务器发送的可用值限制为两个字符,因此不存在溢出风险。在 pg_dump 中,缓冲区受 MAXPGPATH 限制,因此必须通过预处理器扩展插入限制,并将缓冲区增加一个以容纳终止符。这里不存在溢出风险,因为在这种情况下,扫描的缓冲区小于目标缓冲区。将 pg_basebackup 修复反向移植到引入它的 11 版本,并将 pg_dump 修复一直反向移植到 9.6 版本。审核人:Tom Lane 讨论:https://postgr.es/m/B14D3D7B-F98C-4E20-9459-C122C67647FB@yesql.se 反向移植范围:11 和 9.6 https://git.postgresql.org/pg/commitdiff/1d7641d51a51aa00dff685022fab6c03be8f8af8

  • 修复 TOC 文件错误消息打印中的错误。如果无法解析 blob TOC 文件,则错误消息无法打印文件名,因为保存该文件名的变量被用于解析的目标缓冲区所遮蔽。当文件名解析失败时,错误将打印一个空字符串:./pg_restore -d foo -F d dump pg_restore: error: invalid line in large object TOC file "": .. ..而不是预期的错误消息:./pg_restore -d foo -F d dump pg_restore: error: invalid line in large object TOC file "dump/blobs.toc": .. 通过重命名这两个变量来修复,因为共享名称太通用,无法存储任一变量并仍然传达该变量的含义。一直反向移植到 9.6 版本。审核人:Tom Lane 讨论:https://postgr.es/m/A2B151F5-B32B-4F2C-BA4A-6870856D9BDE@yesql.se 反向移植范围:9.6 https://git.postgresql.org/pg/commitdiff/998d060f3db79c6918cb4a547695be150833f9a4

  • 重构 sslfiles Makefile 目标以方便使用。用于 TLS 测试的证书和密钥对的 Makefile 处理变得非常难以使用。添加新证书而无需重新生成所有内容过于复杂。此补丁重构了 sslfiles make 目标,使得添加新证书仅需添加一个 .config 文件,将其添加到 Makefile 的顶部,然后运行 make sslfiles。改进:- 除了 CRL 目录外,文件间依赖项应已修复。- 新证书具有基于当前时间的序列号,从而减少冲突的机会。- CA 索引状态是按需创建的,并在 Make 运行结束时自动清理。- *.config 文件现在是自包含的;一个证书需要一个配置文件而不是两个。- 减少了重复,以及一些不需要的代码(和可能的复制粘贴错误)。- 所有配置文件都位于 conf/ 目录下。该目标被移动到其自己的 makefile 中,以避免与全局 make 设置冲突。作者:Jacob Champion pchampion@vmware.com 审核人:Michael Paquier michael@paquier.xyz 讨论:https://postgr.es/m/d15a9838344ba090e09fd866abf913584ea19fb7.camel@vmware.com https://git.postgresql.org/pg/commitdiff/b4c4a00eada3c512e819e9163114a5ad1606bc7e

  • 修复 32 位 Perl 上的 SSL 测试。证书序列号生成在 b4c4a00ea 中更改为使用当前时间戳。因此,测试框架必须使用“openssl x509”查询证书的序列号,该命令以十六进制格式输出序列号。将序列号转换为与 pg_stat_ssl 中的匹配的整数格式需要 64 位 Perl。当测试使用 32 位 Perl 时,这会添加一个检查整数的回退。根据构建场成员 prairiedog 上的失败。讨论:https://postgr.es/m/0D295F43-806D-4B3F-AB98-F941A19E0271@yesql.se https://git.postgresql.org/pg/commitdiff/0c04342b1d3dd5b24f795f94874163be8e21710e

Tom Lane 推送

Andres Freund 推送

Amit Kapila 推送

Andrew Dunstan 推送

Noah Misch 推送

  • 避免 RelationBuildDesc() 中影响 CREATE INDEX CONCURRENTLY 的竞争条件。 CIC 和 REINDEX CONCURRENTLY 假设后端看到它们的目录更改不晚于每个后端下一次事务启动。当后端在 CIC 索引上运行 RelationBuildDesc() 的过程中吸收了相关的失效时,这一点未能保持。使用结果索引的查询可能会静默地找不到行。通过使 RelationBuildDesc() 循环直到完成,而不接受相关的失效,修复了未来索引构建的问题。可能需要重新索引以从过去的事件中恢复;REINDEX CONCURRENTLY 就足够了。回溯修复到 9.6(所有受支持的版本)。Noah Misch 和 Andrey Borodin,由 Andres Freund 审查(在早期版本中)。讨论:https://postgr.es/m/20210730022548.GA1940096@gust.leadboat.com https://git.postgresql.org/pg/commitdiff/fdd965d074d46765c295223b119ca437dbcac973

  • 修复最新的预备事务的 CREATE INDEX CONCURRENTLY。提交 8a54e12a38d1545d249f1402f66c8cde2837d97c 的目的是解决这个问题,并且当 PREPARE TRANSACTION 在 CIC 查找锁冲突之前完成时,它就足够了。否则,事情仍然会出错。和以前一样,在启用预备事务的情况下使用过 CIC 的集群中,使用结果索引的查询可能会静默地找不到行。可能需要重新索引以从过去的事件中恢复;REINDEX CONCURRENTLY 就足够了。通过使 CIC 等待任意最新的预备事务以及可能仍会 PREPARE TRANSACTION 的普通事务,修复了未来索引构建的问题。作为其中的一部分,在调用 ProcArrayClearTransaction() 之前,让 PREPARE TRANSACTION 将锁转移到其虚拟 PGPROC。回溯修复到 9.6(所有受支持的版本)。Andrey Borodin,由 Andres Freund 审查(在早期版本中)。讨论:https://postgr.es/m/01824242-AA92-4FE9-9BA7-AEBAFFEA3D0C@yandex-team.ru https://git.postgresql.org/pg/commitdiff/3cd9c3b921977272e6650a5efbeade4203c4bca2