2022 Nordic PGDay 将于2022年3月22日在芬兰赫尔辛基的希尔顿赫尔辛基斯特兰德酒店举行。论文征集(CfP)将于2021年12月31日截止,请 在此 提交。
PGroonga 2.3.4,一个支持所有语言的全文本搜索平台,已发布。
Pgpool-II 4.2.6、4.1.9、4.0.16、3.7.21 和 3.6.28,一个用于 PostgreSQL 的连接池和语句复制系统,已 发 布 了。
Ora2Pg 23.0,一个用于将 Oracle 数据库迁移到 PostgreSQL 的工具,已发布。https://github.com/darold/ora2pg/blob/master/changelog
BigAnimal,Azure 上的托管 PostgreSQL 数据库,已发布。
pgAdmin4 6.2,一个用于 PostgreSQL 的 Web 和本地 GUI 控制中心,已发布。
https://archives.postgresql.org/pgsql-jobs/2021-11/
Planet PostgreSQL:https://planet.postgresql.org/
本周 PostgreSQL 周报由 David Fetter 提供。
请在太平洋标准时间(PST8PDT)周日晚上3:00之前将新闻和公告发送至 david@fetter.org。
Robert Haas 提交
修复了 bbsink_throttle_manifest_contents 中的笔误。Dmitry Dolgov 报告和诊断。讨论:http://postgr.es/m/20211115162641.dmo6l32fklh64gnw@localhost https://git.postgresql.org/pg/commitdiff/1b098da2009362e0e8d9a1d0a6aac2f2bd3e2f0b
将 InitXLogInsert() 调用从 InitXLOGAccess() 移至 BaseInit()。目前,存在一个未公开的编码规则,即在尝试写入 WAL 之前,必须调用 RecoveryInProgress() 或执行其他导致 InitXLogInsert() 调用的操作。否则,WAL 构建缓冲区将不会初始化,从而导致失败。依赖 RecoveryInProgress() 这样的状态查询函数产生初始化关键数据结构的副作用不太好,因此将其提前到后端启动时进行初始化。补丁作者:我。评审者:Nathan Bossart 和 Michael Paquier。讨论:http://postgr.es/m/CA+TgmoY7b65qRjzHN_tWUk8B4sJqk1vj1d31uepVzmgPnZKeLg@mail.gmail.com https://git.postgresql.org/pg/commitdiff/e51c46991f0ee99cca222305619dee5543a1290a
Amit Kapila 提交
更改 REPLICA IDENTITY 索引时使 relcache 失效。更改 REPLICA IDENTITY INDEX 为另一个时,目标表的 relcache 未被失效。这导致在订阅者端应用更新/删除操作时跳过,因为查找相应行的所需列未被记录。作者:唐海鹰,侯志杰 评审者:Euler Taveira,Amit Kapila 向后移植到:10 讨论:https://postgr.es/m/OS0PR01MB61133CA11630DAE45BC6AD95FB939@OS0PR01MB6113.jpnprd01.prod.outlook.com https://git.postgresql.org/pg/commitdiff/354a1f8d220fbbb07b0ded32c5ade72646afb801
修复导致 oldest xmin 无法推进的并行操作。在确定 xid 边界时,我们会跳过正在运行 Vacuum 的后端。为了计算 Vacuum 的 Xmin,我们还会忽略 Create Index Concurrently 或 Reindex Concurrently。但我们没有在并行执行这些操作时设置相应的标志,这阻止了 Xid 边界的推进。Create Index Concurrently 或 Reindex Concurrently 操作的优化在 PG-14 中实现,但对于 Parallel Vacuum 的修复相同,因此向后移植到 PG-13。作者:Sawada Masahiko 评审者:Amit Kapila 向后移植到:13 讨论:https://postgr.es/m/CAD21AoCLQqgM1sXh9BrDFq0uzd3RBFKi=Vfo6cjjKODm0Onr5w@mail.gmail.com https://git.postgresql.org/pg/commitdiff/0f0cfb494004befb0f6e89d3129347869420c509
Álvaro Herrera 提交
Michaël Paquier 提交
删除 xlog.c 中的全局变量 "LastRec"。该变量现在仅由 StartupXLOG() 使用,因此将其设为局部变量以简化代码。作者:Amul Sul 评审者:Tom Lane, Michael Paquier 讨论:https://postgr.es/m/CAAJ_b96Qd023itERBRN9Z7P2saNDT3CYvGuMO8RXwndVNN6z7g@mail.gmail.com https://git.postgresql.org/pg/commitdiff/f975fc3a3542005ed0dd689bdb5bd9ed4e1f4d52
向 pg_upgrade 的二进制兼容性检查回归测试添加表。此提交向主回归测试套件添加了一个包含所有核心数据类型(某些例外)的表。此表不会被删除,因此 pg_upgrade 可以检查表中跟踪的类型的二进制兼容性。如果向核心添加了新类型,则此部分测试需要刷新,但测试设计为在这种情况下失败。由于这对于升级非常有用,并且这些升级依赖于从旧版本升级过程中创建的对象,因此向后移植到 12,这是最后一次进行二进制不兼容更改的点(7c15cef)。这有望足以发现新版本的 Postgres 在开发过程中是否存在问题,以便采取措施(例如 0ccfc28 for sql_identifier)。一个尚未涵盖的领域是外部模块,它们可能创建自己的类型。pg_upgrade 的测试基础结构尚未与存储在核心中的外部模块(src/test/modules/ 或 contrib/,它们都使用相同的数据库名称进行测试,因此会出现重叠)集成。这可以在未来得到改进。作者:Justin Pryzby 评审者:Jacob Champion, Peter Eisentraut, Tom Lane, Michael Paquier 讨论:https://postgr.es/m/20201206180248.GI24052@telsasoft.com 向后移植到:12 https://git.postgresql.org/pg/commitdiff/835bcba8b8d72a00cecc5431b67e70bbea93f947
修复用于升级二进制兼容性检查的表中的 ACL 项的引用。根据构建农场成员 prion 的报告,它在使用包含连字符的角色名称运行回归测试。由 835bcba 引入的问题。讨论:https://postgr.es/m/YZW4MvzCZ+hQ34vw@paquier.xyz 向后移植到:12 https://git.postgresql.org/pg/commitdiff/ac1c7458b17633d1e53a01393d12774c10cb6a91
改进 psql 中 transform、domain 和 sequence 的制表符补全。完成了以下改进:- 为 CREATE DOMAIN 添加了一些制表符补全。- 为 CREATE TRANSFORM 添加了一些制表符补全。- 为 CREATE SEQUENCE AS 添加了类型补全。作者:Ken Kato 评审者:Kyotaro Horiguchi, Michael Paquier 讨论:https://postgr.es/m/8d370135aef066659eef8e8fbfa6315b@oss.nttdata.com https://git.postgresql.org/pg/commitdiff/0cd6d3b3c5aeac81903aa7de92e406f8567898a2
Peter Eisentraut 提交
Daniel Gustafsson 提交
文档:为 CREATE PUBLICATION 添加“请参阅”引用。CREATE PUBLICATION 参考页上的“请参阅”部分与 CREATE SUBSCRIPTION 及其 ALTER 命令的交叉引用不匹配。通过添加对 CREATE 和 ALTER SUBSCRIPTION 页面的 xref 来修复。向后移植到 v10,其中引入了 CREATE PUBLICATION。作者:Peter Smith smithpb2250@gmail.com 评审者:Sawada Masahiko sawada.mshk@gmail.com 讨论:https://postgr.es/m/CAHut+PvGWd3-Ktn96c-z6uq-8TGVVP=TPOkEovkEfntoo2mRhw@mail.gmail.com 向后移植到:10 https://git.postgresql.org/pg/commitdiff/3374a87b62cc553fa65f57ade019dcf3104ae639
改进发布错误消息。Commit 81d5995b4b 为发布的不正确 relkinds 引入了更细粒度的错误消息,而未记录的表和临时表使用相同的消息报告。这为这些 relpersistence 类型提供了单独的错误消息。作者:Bharath Rupireddy bharath.rupireddyforpostgres@gmail.com 评审者:Peter Eisentraut peter.eisentraut@enterprisedb.com 评审者:Jeevan Ladhe jeevan.ladhe@enterprisedb.com 评审者:Euler Taveira euler@eulerto.com 讨论:https://postgr.es/m/CALj2ACW9S=AswyQHjtO6WMcsergMkCBTtzXGrM8DX26DzfeTLQ@mail.gmail.com https://git.postgresql.org/pg/commitdiff/aa12781b0d039d93e1a851ece4bc75c3746cbd43
Tom Lane 提交
修复 INSERT/SELECT 中 SQL 标准函数的参数显示。如果 SQL 标准函数体包含 INSERT ... SELECT 语句,则 SELECT 中引用的任何函数参数始终以 $N 样式打印,而不是使用参数名称(如果存在)。虽然不是严格错误,但这并非预期,并且与在任何其他类型的语句中打印此类参数的方式不一致。原因是 get_query_def 从 get_insert_query_def 递归调用时,未能向下传递 context->namespaces 列表,而是传递了常量 NIL。这是一个非常古老的疏忽,但据我所知,在提交 e717a9a18 添加具有函数参数的最外层命名空间之前,它没有可见的影响。我们不允许 INSERT ... SELECT 作为子查询,除非在顶层 WITH 子句中,在这种情况下,它不能包含任何可能需要访问上层命名空间的外部引用。因此,虽然这可能是一个错误,但在此之前更改它似乎没有意义。顺便,加固 e717a9a18 添加的代码,使其不会在 PARAM_EXTERN Param 出现在意外位置时崩溃。来自 Erki Eessaar 的报告。代码修复:我,回归测试用例:Masahiko Sawada。讨论:https://postgr.es/m/AM9PR01MB8268347BED344848555167FAFE949@AM9PR01MB8268.eurprd01.prod.exchangelabs.com https://git.postgresql.org/pg/commitdiff/a8d8445a7b2f80f6d0bfe97b19f90bd2cbef8759
在 pg_dump 和 pg_basebackup 中更健壮地处理 close() 失败。Coverity 抱怨说,在 pg_basebackup 的一个地方,在失败的 gzclose 后应用 get_gz_error 是不安全的。我认为它是正确的:该调用非常可能在触摸已释放的内存。将其更改为检查 errno,就像我们对其他 gzclose 调用所做的那样。此外,请务必在任何我们关心的错误状态的 gzclose() 调用之前立即将 errno 初始化为零。(有些调用我们不关心,因为我们在之前的步骤中已经失败了。)这可以确保在 gzclose() 失败但未设置 errno 时,我们不会得到误导性的无关错误代码。我们可以更努力地做到这一点,但对我来说,如果我们不滥用 zlib,所有这些情况基本上都是不可能发生的,所以不值得额外的注释。此外,修复了几个根本没有检查关闭时错误的地点,大多数都在关闭或 gzclose 本身之外;还有一个地方检查了但没有报告 errno。向后移植到 v12。这些错误比这更老,但由于 v12 中发生的客户端日志 API 更改以及客户端代码在此之前不能依赖 %m 的事实,补丁需要大量修改才能在旧分支上工作。考虑到缺乏相关的现场投诉,这样做似乎不值得。补丁作者:我;感谢 Michael Paquier 的审阅。讨论:https://postgr.es/m/1343113.1636489231@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/3cac2c8caaefc642332e6994ce80032cc7d4cfdf
清理 pg_basebackup 的 walmethods.c 中的错误处理。这里的错误处理很混乱,原因是一个根本性的糟糕设计(依赖 errno 保持其值比假设的安全时间长得多),以及很多纯粹的疏忽,包括根本注意不到错误以及报告不正确的 errno。此外,最近添加的 LZ4 压缩完全破坏了事情,因为 liblz4 不使用 errno 来报告错误。为了改善这一点,将错误状态保存在 DirectoryMethodData 或 TarMethodData 结构中,并添加一个字符串字段,以便我们能够处理不设置 errno 的情况。(tar 方法已经有了这个的版本,但可以更有效地完成,因为所有这些情况都使用恒定的错误字符串。)使 dir 和 tar 方法以基本相同的方式处理错误,而以前不是。这需要在许多地方将 errno 复制到状态结构中,这有点乏味,但优点是我们可以在许多地方摆脱保存和恢复 errno 的临时代码……更不用说它修复了其他本应保存/恢复 errno 但忽略了的地方。顺便,修复了一些无用地 static 的缓冲区为普通的局部变量。fsync() 的错误处理仍然存在一个问题,但这似乎是另一个补丁的材料。虽然 LZ4 问题是新的,但其余的都是针对旧错误的修复,所以向后移植到引入 walmethods.c 的 v10。补丁作者:我;感谢 Michael Paquier 的审阅。讨论:https://postgr.es/m/1343113.1636489231@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/248c3a937dd018a72095f407cff727c9f08db0c1
为 starts_with() 添加一个规划器支持函数。这填补了规划器对 starts_with() 和等效的 ^@ 运算符的一些支持空白:* 诸如 "textcol ^@ constant" 这样的条件现在可以使用常规的 btree 索引,而不仅仅是 SP-GiST 索引,只要索引的排序规则是 C。(这就像 "textcol LIKE 'foo%'" 一样。)* "starts_with(textcol, constant)" 可以像 "textcol ^@ constant" 一样进行优化。* 固定前缀 LIKE 和正则表达式模式在其他方面也更像 starts_with():如果你将其应用于 SPGiST 索引的列,你将获得一个使用 ^@ 的索引条件,而不是两个带有 >= 和 < 的索引条件。按 Shay Rojansky 的投诉。补丁作者:我;感谢 Nathan Bossart 的审阅。讨论:https://postgr.es/m/232599.1633800229@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/a148f8bc04b9980f019ea0d4b89311cf0bdc22b7
提供一个 simple_prompt() 的变体,可以被 ^C 中断。到目前为止,你无法通过键入 control-C(或 SIGINT 的其他本地拼写)来逃脱 psql 的 \password 命令。这很不用户友好,所以改进它。要做到这一点,我们必须修改 pg_get_line.c 提供的函数;但我们不想干扰 psql 的 SIGINT 处理程序设置,所以提供一个 API,让该处理程序可以触发取消。这依赖于我们不会通过 longjmp() 退出 fgets() 来造成重大损害的假设。虽然这显然有点不可靠,但我们在主输入循环中早已有了同样的假设,并且报告的错误很少。psql 还有一些其他 simple_prompt() 调用也可能需要改进,但目前只处理 \password。作者:Nathan Bossart,我进行了一些小的调整。讨论:https://postgr.es/m/747443.1635536754@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/5f1148224bd78bcf3bf7d916b8fe85dd820c52c6
编译 bitcode 时使用适当的 -Wno-warning 开关。我们使用 "clang" 来编译 LLVM 位码文件以进行内联。这可能与构建的主 C 编译器不同,因此它需要自己的一组编译器标志。为了简化配置,我们不费心将任何 -W 开关添加到该标志集中;因为主构建会向我们显示任何警告,所以几乎不需要。但是,如果我们不想看到不必要的警告,我们仍然必须添加我们通常与 clang 一起使用的任何 -Wno-warning 开关。在提交 9ff47ea41 之前,这被忽略了,该提交试图添加 -Wno-compound-token-split-by-macro;使用不匹配的 CC 和 CLANG 的构建农场动物仍然显示这些警告。我不确定为什么我们从未注意到缺少 -Wno-unused-command-line-argument 的影响(也许它只在 -Wall? 激活)。clang 目前不支持 -Wno-format-truncation 或 -Wno-stringop-truncation,尽管为了未来的兼容性和一致性,我包含了这些测试。向后移植到 v11,在那里我们开始构建位码文件。讨论:https://postgr.es/m/2921539.1637254619@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/276517a96484f9e39a7a1095ab39fa76ef1ee8cc
允许 psql 的其他 uses of simple_prompt() 被 ^C 中断。这完成了 5f1148224 未完成的工作。\prompt 现在可以被取消,并且 \connect 在启动时发出的密码提示也可以被取消。(我们不需要为启动时发出的密码提示做任何事情,因为那时我们还没有捕获 SIGINT。)作者:Nathan Bossart 讨论:https://postgr.es/m/747443.1635536754@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/46d665bc26ce57b5afecbc218c8fc3c6848211d8
修复 SP-GiST 扫描初始化逻辑以适应二进制兼容情况。Commit ac9099fc1 重新排列了 spgGetCache() 中的逻辑,该逻辑确定索引的 attType(名义输入数据类型)和 leafType(存储在叶索引元组中的实际类型)。事实证明,这破坏了以下情况:(a) 实际输入数据类型与名义类型不同,(b) opclass 的配置函数将 leafType 留空,并且 (c) opclass 没有 "compress" 函数。(b)导致我们将实际输入数据类型分配为 leafType,然后因为这不等于 attType,所以我们抱怨需要 "compress" 函数。对于非多态 opclasses,情况 (a) 出现在二进制兼容的情况下,例如对 varchar 列使用 SP-GiST text_ops,或对域使用任何 opclass(基于其名义输入类型)。为了修复,当索引声明的列类型与 attType 不同但二进制兼容时,使用 attType 作为 leafType。仅在 leafType 留空的情况下这样做,以避免覆盖 opclass 做的任何显式选择。按 Ilya Anfimov 的 bug #17294。向后移植到 v14。讨论:https://postgr.es/m/17294-8f6c7962ce877edc@postgresql.org https://git.postgresql.org/pg/commitdiff/f4e7ae2b8a67ad6801726553a024a3306716ef80
文档:更新与最小 Test::More 版本相关的某些内容。Commit 405f32fc4 中的疏忽。此外,添加一个(艰难发现的)技巧,关于如何在最新的 Linux 平台上让 Test::More 0.98 通过其回归测试。https://git.postgresql.org/pg/commitdiff/92e70796e91e2f9086fad0156e0e91513e54a66b
pg_receivewal, pg_recvlogical:允许取消初始密码提示。以前,不可能通过 control-C 在这些程序提示输入密码时终止它们。我们可以通过将 SIGINT 处理程序的设置从初始 GetConnection() 调用之前移到之后来轻松修复它们的初始密码提示。此修复程序不允许逃脱后续的重新提示,但这些提示应该极其罕见,因为在此期间用户的密码或服务器的身份验证设置可能会发生变化。我们曾考虑应用一个类似于 commit 46d665bc2 的修复程序,但这似乎比其价值更复杂。此外,这种方式可以向后移植,而那种不行。此行为存在于所有支持的版本中,因此向后移植到所有版本。作者:Tom Lane 和 Nathan Bossart 讨论:https://postgr.es/m/747443.1635536754@sss.pgh.pa.us https://git.postgresql.org/pg/commitdiff/282b6d00abf5cebece6f94c796a4ed807a0176db
Andres Freund 提交
Andrew Dunstan 推送