E.44. Выпуск 9.6.13
Дата выпуска: 2019-05-09
В этот выпуск вошли различные исправления, внесённые после версии 9.6.12. За информацией о нововведениях версии 9.6 обратитесь к Разделу E.57.
E.44.1. Миграция на версию 9.6.13
Если используется версия 9.6.X, выгрузка/восстановление базы не требуется.
Однако если вы обновляете сервер с более ранней версии, чем 9.6.9, см. Раздел E.48.
E.44.2. Изменения
Устранение возможности обойти политики защиты на уровне строк (RLS), используя оценки избирательности (Дин Рашид)
При вычислении оценок избирательности планировщик применяет пользовательские операторы к значениям, находящимся в
pg_statistic(то есть к самым частым значениям). Таким образом, негерметичный оператор может раскрыть некоторые данные в столбце таблицы, даже если пользователь не имеет доступа к этому столбцу. В CVE-2017-7484 мы добавили ограничения для предотвращения этой утечки, но не учли особенности защиты на уровне строк. Пользователь, которому в SQL дано право чтения столбца, но политикой RLS запрещён доступ к некоторым строкам, тем не менее мог получить некоторые сведения об их содержимом через негерметичный оператор. Это исправление усиливает ограничения, разрешая применение негерметичных операторов к статистическим данным только при отсутствии политики RLS. (CVE-2019-10130)Исправление поведения
UPDATEиDELETEпри работе с деревом наследования или секционированной таблицей, допускающими исключение всех таблиц (Амит Ланготе, Том Лейн)Ранее в подобных условиях такие запросы не выдавали корректный набор выходных столбцов с предложением
RETURNING. Помимо этого, в этих запросах также не срабатывали никакие триггеры уровня операторов.Исправление обработки явных элементов
DEFAULTв командеINSERT ... VALUESс несколькими строкамиVALUES, целевым отношением для которой является обновляемое представление (Амит Ланготе, Дин Рашид)Когда в обновляемом представлении для столбца не задано значение по умолчанию, но оно задано в нижележащей таблице, команда
INSERT ... VALUESс одной строкой вставит в столбец это значение по умолчанию. Однако при выполнении этой команды с несколькими строками вместо этого значения всегда вставлялся NULL. Теперь это исправлено, и такая команда выполняется так же, как и команда с одной строкой.Исправление
CREATE VIEW, позволяющее создавать представления с нулём столбцов (Ашутош Шарма)Мы должны разрешить это для согласованности с возможностью создавать таблицы с нулём столбцов. Так как таблицу можно преобразовать в представление, ранее такое представление можно было получить даже при существовавшем ограничении, что приводило к сбоям при выгрузке/загрузке базы данных.
Добавление поддержки
CREATE TABLE IF NOT EXISTS ... AS EXECUTE ...(Андреас Карлссон)Сочетание предложений
IF NOT EXISTSиEXECUTEдолжно поддерживаться, но в грамматике отсутствовало соответствующее правило.Использование прав корректного пользователя при выполнении вложенных
SELECTв выражениях политик защиты на уровне строк (Дин Рашид)Ранее при обращении через представление к таблице с политикой RLS такие проверки могли осуществляться от имени пользователя, выполняющего запрос к представлению, а не от имени владельца представления, как должно быть.
Теперь при значении
xmlпараметраxmloptionXML-документы считаются допустимыми значениями типаxmlсогласно требованию, появившемуся в стандарте SQL:2006 (Чепмен Флэк)Ранее PostgreSQL следовал определению стандарта SQL:2003, в котором это не допускалось. Но это создавало серьёзную проблему при выгрузке/восстановлении данных: ни одно из значений
xmloptionне позволяло принять все допустимые XML-данные. В связи с этим решено перейти к определению 2006.Также модифицирована утилита pg_dump, чтобы при восстановлении данных выполнялась команда
SET xmloption = content. Это гарантирует, что выгрузка/восстановление сработает, даже если в данных преобладает вариантdocument.Улучшение выполняемых при запуске сервера проверок на предмет использования ранее созданного сегмента общей памяти (Ной Миш)
Теперь главный процесс (postmaster) будет более надёжно определять активные процессы, оставшиеся от предыдущего воплощения сервера, даже в случае удаления файла
postmaster.pid.Исключение транзакций параллельных исполнителей из числа отдельных транзакций.
Устранение несовместимости записей GIN-индекса в WAL (Александр Коротков)
Исправление, вошедшее в февральский корректирующий выпуск, не учитывало все тонкости обратной совместимости. Ведущий сервер этого выпуска формировал в WAL такие записи об удалении страниц GIN, которые не мог корректно воспринять ведомый более старой версии.
Допущение кодов ошибок
EINVALиENOSYSв результатах функцийfsyncиsync_file_rangeтам, где это приемлемо (Томас Манро, Джеймс Сьюэлл)Предыдущее изменение, приводящее к панической остановке при ошибках файловой синхронизации, оказалось излишне параноидальным в ряде случаев, где сбой предсказуем и по сути означает «операция не поддерживается».
Устранение ошибок планировщика «failed to build any
N-way joins» (не удалось построить никакиеN-сторонние соединения) с подзапросами LATERAL снаружи полных внешних соединений (Том Лейн)Проверка прав корректного пользователя при применении правил, позволяющих негерметичным операторам обращаться к данным
pg_statistic(Дин Рашид)Когда пользователь обращается к нижележащей таблице через представление, решение о возможности применения негерметичных операторов к статистическим данным таблицы должно приниматься с учётом прав не этого пользователя, а владельца представления. Таким образом, правила планировщика по определению видимости данных приводятся в соответствие с правилами исполнителя, что позволит избежать неоправданно невыгодных планов.
Ускорение планирования запросов со множеством условий равенства и множеством возможно связанных с ними ограничений внешнего ключа (Дэвид Роули)
Оптимизация неэффективных операций сложности O(N^2) при отмене транзакции, создавшей множество таблиц (Томаш Вондра)
Устранение условий гонки при управлении динамической общей памятью (Томас Манро)
В этих условиях могли возникать ошибки «dsa_area could not attach to segment» (не удалось подключить dsa_area к сегменту) или «cannot unpin a segment that is not pinned» (нельзя открепить сегмент, который не закреплён).
Устранение условий гонки, при которых сервер горячего резерва мог не отключиться, получив запрос на постепенное отключение (Том Лейн)
Устранение возможности краха при получении в параметрах
pg_identify_object_as_address()неправильных данных (Альваро Эррера)Улучшение правил проверки паролей, зашифрованных алгоритмами SCRAM-SHA-256 и MD5 (Джонатан С. Кац)
Строка пароля с определёнными начальными символами могла по ошибке приниматься за строку, закодированную в формате SCRAM-SHA-256 или MD5. Такой пароль можно было установить, но нельзя было использовать.
Исправление обработки значений
lc_time, подразумевающих кодировку, отличающуюся от кодировки базы (Хуан Хосе Сантамария Флеча, Том Лейн)С локализованными названиями дней или месяцев, включающими не ASCII-символы, в таких локалях ранее выдавались неожиданные ошибки или некорректные строки.
Исправление ошибочных проверок
operator_precedence_warningс унарным оператором «минус» (Рикард Фалькеборн)Недопущение
NaNв качестве значения серверных параметров, принимающих числа с плавающей точкой (Том Лейн)Реорганизация работы
REINDEXдля предотвращения сбоев проверочных утверждений при переиндексировании отдельных индексовpg_class(Андрес Фройнд, Том Лейн)Исправление проверочных утверждений в планировщике при обработке параметризованных фиктивных путей (Том Лейн)
Добавление нужной функции проверки в результат, выдаваемый функцией
SnapBuildInitialSnapshot()(Антонин Хоуска)Для кода ядра это не важно, но важно для некоторых расширений.
Устранение периодических ошибок «could not reattach to shared memory» (не удалось переподключиться к общей памяти) при запуске сеансов в Windows (Ной Миш)
Невыявленным ранее источником таких проблем было создание стеков потоков в пуле потоков по умолчанию. Теперь такие стеки размещаются в другой области памяти.
Исправлена обработка ошибок при сканировании каталога в Windows (Константин Книжник)
Такие ошибки, как отсутствие прав для чтения каталога, не обнаруживались и не выдавались корректно; вместо этого поведение кода было таким же, как и с пустым каталогом.
Исправление грамматических дефектов в ecpg (Том Лейн)
Из-за пропущенной точки с запятой конструкция
SET(но непеременная= DEFAULTSET) в программах ecpg обрабатывалась некорректно, и в результате получался синтаксически некорректный код, не воспринимаемый сервером. Кроме того, в командахпеременнаяTO DEFAULTDROP TYPEиDROP DOMAIN, в которых перечислялось несколько имён типов, фактически обрабатывалось только первое имя.Согласование синтаксиса
CREATE TABLE ASв ecpg с принятым на стороне сервера (Дайсукэ Хигути)Ликвидация возможности переполнения буфера при обработке в ecpg имён включаемых файлов (Лю Хуайлин, Фей Ву)
Предупреждение краха в
contrib/vacuumloпри ошибке вlo_unlink()(Том Лейн)Синхронизация нашей копии библиотеки timezone с выпущенной IANA версией 2019a (Том Лейн)
При этом устранён небольшой дефект в zic, в результате которого выдавались данные о некорректном переходе в 2440 г. для часового пояса
Africa/Casablanca, и добавлена поддержка нового параметра zic-r.Обновление данных часовых поясов до версии tzdata 2019a, включающее изменение правил перехода на летнее время в Палестине и Метлакатле, а также корректировку исторических данных для Израиля.
Часовой пояс
Etc/UCTтеперь является ссылкой наEtc/UTC(добавленной для обратной совместимости), а не отдельным поясом, генерирующем аббревиатуруUCT, которая теперь, как правило, просто опечатка. PostgreSQL по-прежнему принимает на вход такую аббревиатуру, но уже не выдаёт её.
E.44. Release 9.6.13
Release date: 2019-05-09
This release contains a variety of fixes from 9.6.12. For information about new features in the 9.6 major release, see Section E.57.
E.44.1. Migration to Version 9.6.13
A dump/restore is not required for those running 9.6.X.
However, if you are upgrading from a version earlier than 9.6.9, see Section E.48.
E.44.2. Changes
Prevent row-level security policies from being bypassed via selectivity estimators (Dean Rasheed)
Some of the planner's selectivity estimators apply user-defined operators to values found in
pg_statistic(e.g., most-common values). A leaky operator therefore can disclose some of the entries in a data column, even if the calling user lacks permission to read that column. In CVE-2017-7484 we added restrictions to forestall that, but we failed to consider the effects of row-level security. A user who has SQL permission to read a column, but who is forbidden to see certain rows due to RLS policy, might still learn something about those rows' contents via a leaky operator. This patch further tightens the rules, allowing leaky operators to be applied to statistics data only when there is no relevant RLS policy. (CVE-2019-10130)Fix behavior for an
UPDATEorDELETEon an inheritance tree or partitioned table in which every table can be excluded (Amit Langote, Tom Lane)In such cases, the query did not report the correct set of output columns when a
RETURNINGclause was present, and if there were any statement-level triggers that should be fired, it didn't fire them.Fix handling of explicit
DEFAULTitems in anINSERT ... VALUEScommand with multipleVALUESrows, if the target relation is an updatable view (Amit Langote, Dean Rasheed)When the updatable view has no default for the column but its underlying table has one, a single-row
INSERT ... VALUESwill use the underlying table's default. In the multi-row case, however, NULL was always used. Correct it to act like the single-row case.Fix
CREATE VIEWto allow zero-column views (Ashutosh Sharma)We should allow this for consistency with allowing zero-column tables. Since a table can be converted to a view, zero-column views could be created even with the restriction in place, leading to dump/reload failures.
Add missing support for
CREATE TABLE IF NOT EXISTS ... AS EXECUTE ...(Andreas Karlsson)The combination of
IF NOT EXISTSandEXECUTEshould work, but the grammar omitted it.Ensure that sub-
SELECTs appearing in row-level-security policy expressions are executed with the correct user's permissions (Dean Rasheed)Previously, if the table having the RLS policy was accessed via a view, such checks might be executed as the user calling the view, not as the view owner as they should be.
Accept XML documents as valid values of type
xmlwhenxmloptionis set tocontent, as required by SQL:2006 and later (Chapman Flack)Previously PostgreSQL followed the SQL:2003 definition, which doesn't allow this. But that creates a serious problem for dump/restore: there is no setting of
xmloptionthat will accept all valid XML data. Hence, switch to the 2006 definition.pg_dump is also modified to emit
SET xmloption = contentwhile restoring data, ensuring that dump/restore works even if the prevailing setting isdocument.Improve server's startup-time checks for whether a pre-existing shared memory segment is still in use (Noah Misch)
The postmaster is now more likely to detect that there are still active processes from a previous postmaster incarnation, even if the
postmaster.pidfile has been removed.Avoid counting parallel workers' transactions as separate transactions (Haribabu Kommi)
Fix incompatibility of GIN-index WAL records (Alexander Korotkov)
A fix applied in February's minor releases was not sufficiently careful about backwards compatibility, leading to problems if a standby server of that vintage reads GIN page-deletion WAL records generated by a primary server of a previous minor release.
Tolerate
EINVALandENOSYSerror results, where appropriate, forfsyncandsync_file_rangecalls (Thomas Munro, James Sewell)The previous change to panic on file synchronization failures turns out to have been excessively paranoid for certain cases where a failure is predictable and essentially means “operation not supported”.
Fix “failed to build any
N-way joins” planner failures with lateral references leading out ofFULLouter joins (Tom Lane)Check the appropriate user's permissions when enforcing rules about letting a leaky operator see
pg_statisticdata (Dean Rasheed)When an underlying table is being accessed via a view, consider the privileges of the view owner while deciding whether leaky operators may be applied to the table's statistics data, rather than the privileges of the user making the query. This makes the planner's rules about what data is visible match up with the executor's, avoiding unnecessarily-poor plans.
Speed up planning when there are many equality conditions and many potentially-relevant foreign key constraints (David Rowley)
Avoid O(N^2) performance issue when rolling back a transaction that created many tables (Tomas Vondra)
Fix race conditions in management of dynamic shared memory (Thomas Munro)
These could lead to “dsa_area could not attach to segment” or “cannot unpin a segment that is not pinned” errors.
Fix race condition in which a hot-standby postmaster could fail to shut down after receiving a smart-shutdown request (Tom Lane)
Fix possible crash when
pg_identify_object_as_address()is given invalid input (Álvaro Herrera)Tighten validation of encoded SCRAM-SHA-256 and MD5 passwords (Jonathan Katz)
A password string that had the right initial characters could be mistaken for one that is correctly hashed into SCRAM-SHA-256 or MD5 format. The password would be accepted but would be unusable later.
Fix handling of
lc_timesettings that imply an encoding different from the database's encoding (Juan José Santamaría Flecha, Tom Lane)Localized month or day names that include non-ASCII characters previously caused unexpected errors or wrong output in such locales.
Fix incorrect
operator_precedence_warningchecks involving unary minus operators (Rikard Falkeborn)Disallow
NaNas a value for floating-point server parameters (Tom Lane)Rearrange
REINDEXprocessing to avoid assertion failures when reindexing individual indexes ofpg_class(Andres Freund, Tom Lane)Fix planner assertion failure for parameterized dummy paths (Tom Lane)
Insert correct test function in the result of
SnapBuildInitialSnapshot()(Antonin Houska)No core code cares about this, but some extensions do.
Fix intermittent “could not reattach to shared memory” session startup failures on Windows (Noah Misch)
A previously unrecognized source of these failures is creation of thread stacks for a process's default thread pool. Arrange for such stacks to be allocated in a different memory region.
Fix error detection in directory scanning on Windows (Konstantin Knizhnik)
Errors, such as lack of permissions to read the directory, were not detected or reported correctly; instead the code silently acted as though the directory were empty.
Fix grammar problems in ecpg (Tom Lane)
A missing semicolon led to mistranslation of
SET(but notvariable= DEFAULTSET) in ecpg programs, producing syntactically invalid output that the server would reject. Additionally, in avariableTO DEFAULTDROP TYPEorDROP DOMAINcommand that listed multiple type names, only the first type name was actually processed.Sync ecpg's syntax for
CREATE TABLE ASwith the server's (Daisuke Higuchi)Fix possible buffer overruns in ecpg's processing of include filenames (Liu Huailing, Fei Wu)
Avoid crash in
contrib/vacuumloif anlo_unlink()call failed (Tom Lane)Sync our copy of the timezone library with IANA tzcode release 2019a (Tom Lane)
This corrects a small bug in zic that caused it to output an incorrect year-2440 transition in the
Africa/Casablancazone, and adds support for zic's new-roption.Update time zone data files to tzdata release 2019a for DST law changes in Palestine and Metlakatla, plus historical corrections for Israel.
Etc/UCTis now a backward-compatibility link toEtc/UTC, instead of being a separate zone that generates the abbreviationUCT, which nowadays is typically a typo. PostgreSQL will still acceptUCTas an input zone abbreviation, but it won't output it.