Re: Direct I/O

От

Andres Freund

Тема

Re: Direct I/O

Дата

11 апреля 2023 г. в 17:53:35

Msg-id

20230411175335.ku2wacyp3ef5pkmj@awork3.anarazel.de

обсуждение

Ответ на

Re: Direct I/O (Noah Misch)

Список

pgsql-hackers

Дерево обсуждения

Direct I/O Thomas Munro <thomas.munro@gmail.com> 1 ноября 2022 г. в 07:36:18

Re: Direct I/O Justin Pryzby <pryzby@telsasoft.com> 1 ноября 2022 г. в 13:33:41

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 1 ноября 2022 г. в 20:44:30

Re: Direct I/O Andres Freund <andres@anarazel.de> 1 ноября 2022 г. в 22:54:02

Re: Direct I/O Andres Freund <andres@anarazel.de> 2 ноября 2022 г. в 00:21:28

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 14 декабря 2022 г. в 04:48:21

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 22 декабря 2022 г. в 02:04:04

Re: Direct I/O Bharath Rupireddy <bharath.rupireddyforpostgres@gmail.com> 25 января 2023 г. в 07:57:04

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 7 апреля 2023 г. в 12:35:15

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 04:47:36

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 8 апреля 2023 г. в 05:03:25

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 04:59:20

Re: Direct I/O Andres Freund <andres@anarazel.de> 8 апреля 2023 г. в 06:04:08

Re: Direct I/O Andres Freund <andres@anarazel.de> 8 апреля 2023 г. в 18:08:16

Re: Direct I/O Andres Freund <andres@anarazel.de> 8 апреля 2023 г. в 18:55:25

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 20:13:53

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 8 апреля 2023 г. в 21:10:19

Re: Direct I/O Andres Freund <andres@anarazel.de> 8 апреля 2023 г. в 21:23:37

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 8 апреля 2023 г. в 21:31:02

Re: Direct I/O Andres Freund <andres@anarazel.de> 8 апреля 2023 г. в 21:42:14

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 8 апреля 2023 г. в 22:08:41

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 22:10:36

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 8 апреля 2023 г. в 23:05:22

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 01:55:33

Re: Direct I/O Andres Freund <andres@anarazel.de> 9 апреля 2023 г. в 02:18:09

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 02:56:53

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 04:52:10

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 12:17:12

Re: Direct I/O Andres Freund <andres@anarazel.de> 10 апреля 2023 г. в 02:57:41

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 10 апреля 2023 г. в 07:27:27

Re: Direct I/O Andres Freund <andres@anarazel.de> 11 апреля 2023 г. в 01:55:26

Re: Direct I/O Andres Freund <andres@anarazel.de> 11 апреля 2023 г. в 02:15:00

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 11 апреля 2023 г. в 02:31:40

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 11 апреля 2023 г. в 02:58:00

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 10 апреля 2023 г. в 07:40:52

Re: Direct I/O Andrea Gelmini <andrea.gelmini@gmail.com> 10 апреля 2023 г. в 07:04:22

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 9 апреля 2023 г. в 20:43:37

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 23:46:16

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 9 апреля 2023 г. в 02:05:05

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 8 апреля 2023 г. в 22:17:01

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 22:50:15

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 9 апреля 2023 г. в 11:25:13

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 9 апреля 2023 г. в 12:39:50

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 9 апреля 2023 г. в 13:14:28

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 9 апреля 2023 г. в 16:35:29

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 21:15:34

Re: Direct I/O Noah Misch <noah@leadboat.com> 9 апреля 2023 г. в 04:29:54

Re: Direct I/O Andres Freund <andres@anarazel.de> 9 апреля 2023 г. в 21:45:16

Re: Direct I/O Noah Misch <noah@leadboat.com> 9 апреля 2023 г. в 23:40:54

Re: Direct I/O Andres Freund <andres@anarazel.de> 11 апреля 2023 г. в 17:53:35

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 8 апреля 2023 г. в 09:25:20

Re: Direct I/O Jim Nasby <nasbyj@amazon.com> 4 ноября 2022 г. в 19:47:31

Re: Direct I/O Andres Freund <andres@anarazel.de> 5 ноября 2022 г. в 00:38:28

Re: Direct I/O John Naylor <john.naylor@enterprisedb.com> 10 ноября 2022 г. в 07:26:20

Re: Direct I/O Andres Freund <andres@anarazel.de> 15 ноября 2022 г. в 02:50:15

Re: Direct I/O Christoph Berg <myon@debian.org> 12 апреля 2023 г. в 02:56:32

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 12 апреля 2023 г. в 03:04:16

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 12 апреля 2023 г. в 05:48:54

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 12 апреля 2023 г. в 13:08:42

Re: Direct I/O Dagfinn Ilmari Mannsåker <ilmari@ilmari.org> 12 апреля 2023 г. в 14:23:58

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 12 апреля 2023 г. в 16:12:05

Re: Direct I/O Dagfinn Ilmari Mannsåker <ilmari@ilmari.org> 12 апреля 2023 г. в 16:38:06

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 12 апреля 2023 г. в 18:57:46

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 13 апреля 2023 г. в 02:04:59

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 14 апреля 2023 г. в 17:21:33

Re: Direct I/O Andres Freund <andres@anarazel.de> 14 апреля 2023 г. в 18:56:32

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 14 апреля 2023 г. в 19:21:18

Re: Direct I/O Andres Freund <andres@anarazel.de> 14 апреля 2023 г. в 19:33:39

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 14 апреля 2023 г. в 19:38:29

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 14 апреля 2023 г. в 23:16:57

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 15 апреля 2023 г. в 18:19:35

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 15 апреля 2023 г. в 21:48:58

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 15 апреля 2023 г. в 22:10:59

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@mksoft.nu> 16 апреля 2023 г. в 07:54:15

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 16 апреля 2023 г. в 14:18:47

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 16 апреля 2023 г. в 15:29:47

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 16 апреля 2023 г. в 16:16:25

Re: Direct I/O Andrew Dunstan <andrew@dunslane.net> 16 апреля 2023 г. в 17:59:03

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@mksoft.nu> 16 апреля 2023 г. в 18:05:02

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@mksoft.nu> 17 апреля 2023 г. в 05:44:36

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@mksoft.nu> 16 апреля 2023 г. в 14:51:04

Re: Direct I/O Michael Paquier <michael@paquier.xyz> 16 апреля 2023 г. в 22:22:58

Re: Direct I/O Robert Haas <robertmhaas@gmail.com> 17 апреля 2023 г. в 15:44:45

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 17 апреля 2023 г. в 16:06:23

Re: Direct I/O Noah Misch <noah@leadboat.com> 30 апреля 2023 г. в 04:11:06

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 30 апреля 2023 г. в 06:35:30

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 30 апреля 2023 г. в 22:11:48

Re: Direct I/O Justin Pryzby <pryzby@telsasoft.com> 30 апреля 2023 г. в 23:50:51

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 1 мая 2023 г. в 00:00:01

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 1 мая 2023 г. в 02:47:57

Re: Direct I/O Noah Misch <noah@leadboat.com> 14 мая 2023 г. в 21:09:19

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 14 мая 2023 г. в 23:25:23

Re: Direct I/O Peter Eisentraut <peter@eisentraut.org> 22 августа 2023 г. в 12:15:34

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 23 августа 2023 г. в 04:57:43

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 17 апреля 2023 г. в 21:44:10

Re: Direct I/O Andres Freund <andres@anarazel.de> 19 апреля 2023 г. в 17:10:13

Re: Direct I/O Greg Stark <stark@mit.edu> 18 апреля 2023 г. в 19:35:09

Re: Direct I/O Andres Freund <andres@anarazel.de> 19 апреля 2023 г. в 17:13:55

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 4 мая 2023 г. в 00:10:46

Re: Direct I/O Robert Haas <robertmhaas@gmail.com> 19 апреля 2023 г. в 14:11:32

Re: Direct I/O Andres Freund <andres@anarazel.de> 19 апреля 2023 г. в 16:54:38

Re: Direct I/O Robert Haas <robertmhaas@gmail.com> 19 апреля 2023 г. в 17:16:54

Re: Direct I/O Andres Freund <andres@anarazel.de> 19 апреля 2023 г. в 17:43:14

Re: Direct I/O Peter Geoghegan <pg@bowt.ie> 22 августа 2023 г. в 20:48:50

Re: Direct I/O Joe Conway <mail@joeconway.com> 19 апреля 2023 г. в 14:24:59

Re: Direct I/O Justin Pryzby <pryzby@telsasoft.com> 15 апреля 2023 г. в 22:20:50

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@gmail.com> 14 апреля 2023 г. в 19:50:29

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 15 апреля 2023 г. в 00:26:53

Re: Direct I/O Tom Lane <tgl@sss.pgh.pa.us> 15 апреля 2023 г. в 03:22:37

Re: Direct I/O Mikael Kjellström <mikael.kjellstrom@mksoft.nu> 15 апреля 2023 г. в 05:48:52

Re: Direct I/O Christoph Berg <myon@debian.org> 13 апреля 2023 г. в 22:31:40

Re: Direct I/O Thomas Munro <thomas.munro@gmail.com> 12 апреля 2023 г. в 07:37:42

Hi,

On 2023-04-09 16:40:54 -0700, Noah Misch wrote:
> On Sun, Apr 09, 2023 at 02:45:16PM -0700, Andres Freund wrote:
> > It's not *just* that scenario. With a few concurrent connections you can get
> > into problematic territory even with halfway reasonable shared buffers.
>
> I am not familiar with such cases.  You could get there with 64MB shared
> buffers and 256 simultaneous commits of new-refilenode-creating transactions,
> but I'd still file that under going out of one's way to use tiny shared
> buffers relative to the write activity.  What combination did you envision?

I'd not say it's common, but it's less crazy than running with 128kB of s_b...

There's also the issue that log_newpage_range() is used in number of places
where we could have a lot of pre-existing buffer pins. So pinning another 64
buffers could tip us over.

Greetings,

Andres Freund

В списке pgsql-hackers по дате отправления

Предыдущее

От: Andy Fan

Дата: 11 апреля 2023 г. в 17:45:10

Сообщение: Re: Fix the miss consideration of tuple_fraction during add_paths_to_append_rel

Следующее

От: Andres Freund

Дата: 11 апреля 2023 г. в 17:57:04

Сообщение: Re: When to drop src/tools/msvc support