Re: row filtering for logical replication

От

Euler Taveira

Тема

Дата

11 июля 2021 г. в 23:30:24

Msg-id

da2361d4-52e4-4b3d-8775-4918b9971b39@www.fastmail.com

обсуждение

Ответ на

Re: row filtering for logical replication (Euler Taveira)

Список

pgsql-hackers

Дерево обсуждения

row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 марта 2018 г. в 02:03:02

Re: row filtering for logical replication David Fetter <david@fetter.org> 1 марта 2018 г. в 03:47:52

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 марта 2018 г. в 18:41:04

Re: row filtering for logical replication David Fetter <david@fetter.org> 1 марта 2018 г. в 19:06:42

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 1 марта 2018 г. в 18:27:11

Re: row filtering for logical replication Andres Freund <andres@anarazel.de> 2 марта 2018 г. в 00:27:56

Re: row filtering for logical replication David Steele <david@pgmasters.net> 2 марта 2018 г. в 00:51:39

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 2 марта 2018 г. в 02:00:37

Re: row filtering for logical replication David Steele <david@pgmasters.net> 2 марта 2018 г. в 02:16:17

Re: row filtering for logical replication Michael Paquier <michael@paquier.xyz> 2 октября 2018 г. в 08:03:15

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 2 марта 2018 г. в 00:25:02

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 2 марта 2018 г. в 02:03:42

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 ноября 2018 г. в 00:29:59

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 1 ноября 2018 г. в 07:56:48

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 1 ноября 2018 г. в 08:30:36

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 2 ноября 2018 г. в 01:59:36

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 2 ноября 2018 г. в 06:55:05

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 22 ноября 2018 г. в 23:03:27

Re: row filtering for logical replication David Fetter <david@fetter.org> 23 ноября 2018 г. в 16:39:14

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 23 ноября 2018 г. в 17:53:42

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 23 ноября 2018 г. в 16:15:08

Re: row filtering for logical replication Alvaro Herrera <alvherre@2ndquadrant.com> 23 ноября 2018 г. в 16:19:33

Re: row filtering for logical replication Andres Freund <andres@anarazel.de> 3 февраля 2019 г. в 10:14:39

Re: row filtering for logical replication a.kondratov@postgrespro.ru 27 августа 2019 г. в 21:10:47

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 сентября 2019 г. в 00:31:52

Re: row filtering for logical replication Alexey Zagarin <zagarin@gmail.com> 1 сентября 2019 г. в 05:25:41

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 сентября 2019 г. в 00:28:16

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 1 сентября 2019 г. в 09:09:11

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 1 сентября 2019 г. в 23:43:57

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 2 сентября 2019 г. в 23:08:25

Re: row filtering for logical replication Alexey Zagarin <zagarin@gmail.com> 3 сентября 2019 г. в 03:15:44

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 3 сентября 2019 г. в 03:32:12

Re: row filtering for logical replication Erik Rijkers <er@xs4all.nl> 3 сентября 2019 г. в 05:50:29

Re: row filtering for logical replication Alexey Zagarin <zagarin@gmail.com> 4 сентября 2019 г. в 01:21:27

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 4 сентября 2019 г. в 13:11:14

Re: row filtering for logical replication movead li <movead.li@highgo.ca> 23 сентября 2019 г. в 04:59:02

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 25 сентября 2019 г. в 11:08:40

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 25 сентября 2019 г. в 23:20:32

Re: row filtering for logical replication Amit Langote <amitlangote09@gmail.com> 25 ноября 2019 г. в 02:38:51

Re: row filtering for logical replication Amit Langote <amitlangote09@gmail.com> 25 ноября 2019 г. в 02:48:29

Re: row filtering for logical replication Michael Paquier <michael@paquier.xyz> 28 ноября 2019 г. в 02:32:01

Re: row filtering for logical replication Tomas Vondra <tomas.vondra@2ndquadrant.com> 16 января 2020 г. в 21:57:30

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 16 января 2020 г. в 23:58:24

Re: row filtering for logical replication Craig Ringer <craig@2ndquadrant.com> 21 января 2020 г. в 07:32:45

Re: row filtering for logical replication David Steele <david@pgmasters.net> 3 марта 2020 г. в 17:39:03

Re: row filtering for logical replication David Steele <david@pgmasters.net> 16 марта 2020 г. в 13:58:27

Re: row filtering for logical replication "Euler Taveira" <euler@eulerto.com> 1 февраля 2021 г. в 00:23:04

Re: row filtering for logical replication japin <japinli@hotmail.com> 1 февраля 2021 г. в 09:11:33

Re: row filtering for logical replication "Euler Taveira" <euler@eulerto.com> 1 февраля 2021 г. в 19:11:50

Re: row filtering for logical replication japin <japinli@hotmail.com> 2 февраля 2021 г. в 05:37:31

Re: row filtering for logical replication Michael Paquier <michael@paquier.xyz> 2 февраля 2021 г. в 05:02:53

Re: row filtering for logical replication japin <japinli@hotmail.com> 2 февраля 2021 г. в 11:16:23

Re: row filtering for logical replication japin <japinli@hotmail.com> 2 февраля 2021 г. в 11:38:12

Re: row filtering for logical replication "Euler Taveira" <euler@eulerto.com> 2 февраля 2021 г. в 12:34:34

Re: row filtering for logical replication Önder Kalacı <onderkalaci@gmail.com> 17 декабря 2020 г. в 06:43:30

Re: row filtering for logical replication Andres Freund <andres@anarazel.de> 28 января 2021 г. в 02:20:32

Re: row filtering for logical replication Masahiko Sawada <sawada.mshk@gmail.com> 29 декабря 2020 г. в 08:08:11

Re: row filtering for logical replication Önder Kalacı <onderkalaci@gmail.com> 4 января 2021 г. в 13:37:39

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 23 ноября 2018 г. в 17:54:58

Re: row filtering for logical replication Fabrízio de Royes Mello <fabriziomello@gmail.com> 23 ноября 2018 г. в 18:05:21

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 23 ноября 2018 г. в 18:13:53

Re: row filtering for logical replication Fabrízio de Royes Mello <fabriziomello@gmail.com> 23 ноября 2018 г. в 18:29:16

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 23 ноября 2018 г. в 19:03:30

Re: row filtering for logical replication Tomas Vondra <tomas.vondra@2ndquadrant.com> 23 ноября 2018 г. в 20:00:46

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 14 декабря 2018 г. в 15:56:45

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 15 декабря 2018 г. в 14:23:39

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 27 декабря 2018 г. в 19:19:25

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 27 декабря 2018 г. в 23:36:25

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 23 ноября 2018 г. в 19:14:12

Re: row filtering for logical replication Tomas Vondra <tomas.vondra@2ndquadrant.com> 23 ноября 2018 г. в 20:02:15

Re: row filtering for logical replication Hironobu SUZUKI <hironobu@interdb.jp> 21 ноября 2018 г. в 05:51:34

Re: row filtering for logical replication Craig Ringer <craig@2ndquadrant.com> 1 марта 2018 г. в 03:54:58

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 2 марта 2018 г. в 02:15:37

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 23 ноября 2018 г. в 02:02:35

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 23 ноября 2018 г. в 14:40:18

Re: row filtering for logical replication Euler Taveira <euler@timbira.com.br> 23 ноября 2018 г. в 15:17:12

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 14 декабря 2018 г. в 15:38:36

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 15 декабря 2018 г. в 14:13:41

Re: row filtering for logical replication Stephen Frost <sfrost@snowman.net> 27 декабря 2018 г. в 19:05:11

Re: row filtering for logical replication Petr Jelinek <petr.jelinek@2ndquadrant.com> 27 декабря 2018 г. в 23:15:10

On Sun, Jul 11, 2021, at 4:39 PM, Euler Taveira wrote:

with cache (v18)
-----------------------

mean:           0.63 us
stddev:         1.07 us
median:         0.55 us
min-max:        [0.29 .. 844.87] us
percentile(99): 1.38 us
mode:           0.41 us

It represents -57%. It is a really good optimization for just a few extra lines
of code.

cfbot seems to be unhappy with v18 on some of the hosts. Cirrus/FreeBSD failed

in the test 010_truncate. It also failed in a Cirrus/Linux box. I failed to

reproduce in my local FreeBSD box. Since it passes appveyor and Cirrus/macos,

it could probably be a transient issue.

$ uname -a

FreeBSD freebsd12 12.2-RELEASE FreeBSD 12.2-RELEASE r366954 GENERIC amd64

$ PROVE_TESTS="t/010_truncate.pl" gmake check

gmake -C ../../../src/backend generated-headers

gmake[1]: Entering directory '/usr/home/euler/pglr-row-filter-v17/src/backend'

gmake -C catalog distprep generated-header-symlinks

gmake[2]: Entering directory '/usr/home/euler/pglr-row-filter-v17/src/backend/catalog'

gmake[2]: Nothing to be done for 'distprep'.

gmake[2]: Nothing to be done for 'generated-header-symlinks'.

gmake[2]: Leaving directory '/usr/home/euler/pglr-row-filter-v17/src/backend/catalog'

gmake -C utils distprep generated-header-symlinks

gmake[2]: Entering directory '/usr/home/euler/pglr-row-filter-v17/src/backend/utils'

gmake[2]: Nothing to be done for 'distprep'.

gmake[2]: Nothing to be done for 'generated-header-symlinks'.

gmake[2]: Leaving directory '/usr/home/euler/pglr-row-filter-v17/src/backend/utils'

gmake[1]: Leaving directory '/usr/home/euler/pglr-row-filter-v17/src/backend'

rm -rf '/home/euler/pglr-row-filter-v17'/tmp_install

/bin/sh ../../../config/install-sh -c -d '/home/euler/pglr-row-filter-v17'/tmp_install/log

gmake -C '../../..' DESTDIR='/home/euler/pglr-row-filter-v17'/tmp_install install >'/home/euler/pglr-row-filter-v17'/tmp_install/log/install.log 2>&1

gmake -j1 checkprep >>'/home/euler/pglr-row-filter-v17'/tmp_install/log/install.log 2>&1

rm -rf '/usr/home/euler/pglr-row-filter-v17/src/test/subscription'/tmp_check

/bin/sh ../../../config/install-sh -c -d '/usr/home/euler/pglr-row-filter-v17/src/test/subscription'/tmp_check

cd . && TESTDIR='/usr/home/euler/pglr-row-filter-v17/src/test/subscription' PATH="/home/euler/pglr-row-filter-v17/tmp_install/home/euler/pgrf18/bin:$PATH" LD_LIBRARY_PATH="/home/euler/pglr-row-filter-v17/tmp_install/home/euler/pgrf18/lib" LD_LIBRARY_PATH_RPATH=1 PGPORT='69999' PG_REGRESS='/usr/home/euler/pglr-row-filter-v17/src/test/subscription/../../../src/test/regress/pg_regress' /usr/local/bin/prove -I ../../../src/test/perl/ -I . t/010_truncate.pl

t/010_truncate.pl .. ok

All tests successful.

Files=1, Tests=14, 5 wallclock secs ( 0.02 usr 0.00 sys + 1.09 cusr 0.99 csys = 2.10 CPU)

Result: PASS

Euler Taveira

EDB https://www.enterprisedb.com/

В списке pgsql-hackers по дате отправления

Предыдущее

От: Tomas Vondra

Дата: 11 июля 2021 г. в 23:09:21

Сообщение: Re: row filtering for logical replication

Следующее

От: Ranier Vilela

Дата: 11 июля 2021 г. в 23:34:15

Сообщение: Re: Protect against possible memory corruption (src/backend/access/nbtree/nbtxlog.c)