Re: Parallel query execution

От

Michael Paquier

Тема

Дата

16 января 2013 г. в 04:37:31

Msg-id

CAB7nPqSnwdE-FNinbpSvAz2pwtgNQ4e+9MJOJEZRQ+AtrGoTWQ@mail.gmail.com

обсуждение

Ответ на

Re: Parallel query execution (Bruce Momjian)

Список

pgsql-hackers

Дерево обсуждения

Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 22:14:22

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 15 января 2013 г. в 22:33:24

Re: Parallel query execution Gavin Flower <GavinFlower@archidevsys.co.nz> 15 января 2013 г. в 23:04:28

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 23:08:52

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 15 января 2013 г. в 23:16:00

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 23:19:31

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 16 января 2013 г. в 02:37:01

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 03:13:38

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 16 января 2013 г. в 03:17:01

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 03:55:17

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 16 января 2013 г. в 04:47:25

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 13:34:00

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 16 января 2013 г. в 15:23:18

Re: Parallel query execution Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 03:57:00

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 03:59:41

Re: Parallel query execution Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 04:22:50

Re: Parallel query execution Michael Paquier <michael.paquier@gmail.com> 16 января 2013 г. в 04:28:28

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 04:33:02

Re: Parallel query execution Alvaro Herrera <alvherre@2ndquadrant.com> 16 января 2013 г. в 04:48:37

Re: Parallel query execution Tom Lane <tgl@sss.pgh.pa.us> 16 января 2013 г. в 07:07:50

CF3+4 (was Re: Parallel query execution) Abhijit Menon-Sen <ams@2ndQuadrant.com> 16 января 2013 г. в 08:21:24

Re: CF3+4 (was Re: Parallel query execution) Simon Riggs <simon@2ndquadrant.com> 16 января 2013 г. в 12:12:10

Re: CF3+4 (was Re: Parallel query execution) Alvaro Herrera <alvherre@2ndquadrant.com> 16 января 2013 г. в 13:58:22

Re: CF3+4 (was Re: Parallel query execution) Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 14:02:50

Re: CF3+4 Abhijit Menon-Sen <ams@2ndQuadrant.com> 16 января 2013 г. в 14:10:58

Re: CF3+4 Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 14:18:07

Re: CF3+4 Tom Lane <tgl@sss.pgh.pa.us> 16 января 2013 г. в 19:28:22

Re: CF3+4 Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 19:55:32

Re: CF3+4 Tom Lane <tgl@sss.pgh.pa.us> 16 января 2013 г. в 20:14:03

Re: CF3+4 Peter Eisentraut <peter_e@gmx.net> 17 января 2013 г. в 05:01:36

Re: CF3+4 Tom Lane <tgl@sss.pgh.pa.us> 17 января 2013 г. в 06:06:41

Re: CF3+4 Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 20:46:03

Re: CF3+4 Simon Riggs <simon@2ndQuadrant.com> 17 января 2013 г. в 01:34:50

Re: CF3+4 Tom Lane <tgl@sss.pgh.pa.us> 17 января 2013 г. в 03:40:12

Re: CF3+4 Abhijit Menon-Sen <ams@2ndQuadrant.com> 17 января 2013 г. в 04:49:07

Re: CF3+4 Craig Ringer <craig@2ndQuadrant.com> 17 января 2013 г. в 06:53:15

Re: CF3+4 Michael Paquier <michael.paquier@gmail.com> 17 января 2013 г. в 07:05:09

Re: CF3+4 Abhijit Menon-Sen <ams@2ndQuadrant.com> 17 января 2013 г. в 07:15:55

Re: CF3+4 Magnus Hagander <magnus@hagander.net> 17 января 2013 г. в 08:43:54

Re: CF3+4 Craig Ringer <craig@2ndQuadrant.com> 17 января 2013 г. в 13:17:29

Re: CF3+4 Robert Haas <robertmhaas@gmail.com> 17 января 2013 г. в 14:54:48

Re: CF3+4 (was Re: Parallel query execution) Craig Ringer <craig@2ndQuadrant.com> 16 января 2013 г. в 14:16:11

Re: CF3+4 (was Re: Parallel query execution) Craig Ringer <craig@2ndQuadrant.com> 16 января 2013 г. в 14:16:54

Re: CF3+4 (was Re: Parallel query execution) Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 17:36:26

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 16 января 2013 г. в 22:01:23

Re: CF3+4 (was Re: Parallel query execution) Craig Ringer <craig@2ndQuadrant.com> 17 января 2013 г. в 04:39:14

Re: CF3+4 (was Re: Parallel query execution) Magnus Hagander <magnus@hagander.net> 16 января 2013 г. в 12:18:08

Re: CF3+4 (was Re: Parallel query execution) Pavan Deolasee <pavan.deolasee@gmail.com> 17 января 2013 г. в 07:19:33

Re: CF3+4 (was Re: Parallel query execution) Magnus Hagander <magnus@hagander.net> 17 января 2013 г. в 09:22:59

Re: CF3+4 (was Re: Parallel query execution) Jeff Janes <jeff.janes@gmail.com> 19 января 2013 г. в 22:21:37

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 20 января 2013 г. в 18:42:49

Re: CF3+4 (was Re: Parallel query execution) Simon Riggs <simon@2ndQuadrant.com> 20 января 2013 г. в 19:39:14

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 20 января 2013 г. в 21:58:04

Re: CF3+4 (was Re: Parallel query execution) Pavel Stehule <pavel.stehule@gmail.com> 20 января 2013 г. в 20:19:30

Re: CF3+4 (was Re: Parallel query execution) Jeff Janes <jeff.janes@gmail.com> 21 января 2013 г. в 00:07:29

Re: CF3+4 (was Re: Parallel query execution) Heikki Linnakangas <hlinnakangas@vmware.com> 21 января 2013 г. в 07:48:53

Re: CF3+4 (was Re: Parallel query execution) Josh Berkus <josh@agliodbs.com> 21 января 2013 г. в 18:54:56

Re: CF3+4 (was Re: Parallel query execution) Tom Lane <tgl@sss.pgh.pa.us> 21 января 2013 г. в 19:04:32

Re: CF3+4 (was Re: Parallel query execution) Bruce Momjian <bruce@momjian.us> 23 января 2013 г. в 17:19:21

Re: CF3+4 (was Re: Parallel query execution) Josh Berkus <josh@agliodbs.com> 21 января 2013 г. в 19:10:15

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 21 января 2013 г. в 19:39:27

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 21 января 2013 г. в 02:37:39

Re: CF3+4 (was Re: Parallel query execution) Tom Lane <tgl@sss.pgh.pa.us> 21 января 2013 г. в 03:11:49

Re: CF3+4 (was Re: Parallel query execution) Andrew Dunstan <andrew@dunslane.net> 21 января 2013 г. в 03:04:41

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 21 января 2013 г. в 03:07:12

Re: CF3+4 (was Re: Parallel query execution) Dimitri Fontaine <dimitri@2ndQuadrant.fr> 21 января 2013 г. в 22:49:28

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 22 января 2013 г. в 01:23:05

Re: CF3+4 (was Re: Parallel query execution) Josh Berkus <josh@agliodbs.com> 22 января 2013 г. в 01:47:32

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 22 января 2013 г. в 03:33:54

Re: CF3+4 (was Re: Parallel query execution) Phil Sorber <phil@omniti.com> 22 января 2013 г. в 02:28:02

Re: CF3+4 (was Re: Parallel query execution) Pavan Deolasee <pavan.deolasee@gmail.com> 22 января 2013 г. в 05:24:43

Re: CF3+4 (was Re: Parallel query execution) Tom Lane <tgl@sss.pgh.pa.us> 22 января 2013 г. в 06:15:56

Re: CF3+4 (was Re: Parallel query execution) Andrew Dunstan <andrew@dunslane.net> 22 января 2013 г. в 14:22:28

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 23 января 2013 г. в 16:44:33

Re: CF3+4 (was Re: Parallel query execution) Andres Freund <andres@2ndquadrant.com> 23 января 2013 г. в 17:08:52

Re: CF3+4 (was Re: Parallel query execution) Josh Berkus <josh@agliodbs.com> 23 января 2013 г. в 17:51:35

Re: CF3+4 (was Re: Parallel query execution) "Joshua D. Drake" <jd@commandprompt.com> 23 января 2013 г. в 18:27:25

Re: CF3+4 (was Re: Parallel query execution) Stephen Frost <sfrost@snowman.net> 23 января 2013 г. в 18:44:08

Re: CF3+4 (was Re: Parallel query execution) Heikki Linnakangas <hlinnakangas@vmware.com> 23 января 2013 г. в 20:48:50

Re: CF3+4 (was Re: Parallel query execution) Stephen Frost <sfrost@snowman.net> 23 января 2013 г. в 21:28:04

Re: CF3+4 (was Re: Parallel query execution) Amit Kapila <amit.kapila@huawei.com> 24 января 2013 г. в 11:34:59

Re: CF3+4 (was Re: Parallel query execution) Pavel Stehule <pavel.stehule@gmail.com> 23 января 2013 г. в 21:48:42

Re: CF3+4 (was Re: Parallel query execution) Phil Sorber <phil@omniti.com> 23 января 2013 г. в 20:23:39

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 23 января 2013 г. в 20:31:06

Re: CF3+4 (was Re: Parallel query execution) Pavan Deolasee <pavan.deolasee@gmail.com> 24 января 2013 г. в 09:14:04

Re: CF3+4 (was Re: Parallel query execution) Pavan Deolasee <pavan.deolasee@gmail.com> 22 января 2013 г. в 12:45:07

Re: CF3+4 (was Re: Parallel query execution) Pavel Stehule <pavel.stehule@gmail.com> 22 января 2013 г. в 13:17:25

Re: CF3+4 (was Re: Parallel query execution) Dimitri Fontaine <dimitri@2ndQuadrant.fr> 22 января 2013 г. в 09:36:14

Re: CF3+4 (was Re: Parallel query execution) Gavin Flower <GavinFlower@archidevsys.co.nz> 22 января 2013 г. в 17:09:55

Re: CF3+4 (was Re: Parallel query execution) Phil Sorber <phil@omniti.com> 22 января 2013 г. в 02:22:55

Re: CF3+4 (was Re: Parallel query execution) Dimitri Fontaine <dimitri@2ndQuadrant.fr> 22 января 2013 г. в 13:15:58

Re: CF3+4 (was Re: Parallel query execution) Magnus Hagander <magnus@hagander.net> 16 января 2013 г. в 12:08:31

Re: CF3+4 (was Re: Parallel query execution) Abhijit Menon-Sen <ams@2ndQuadrant.com> 16 января 2013 г. в 13:18:26

Re: CF3+4 (was Re: Parallel query execution) Boszormenyi Zoltan <zb@cybertec.at> 16 января 2013 г. в 13:43:50

Re: CF3+4 (was Re: Parallel query execution) Phil Sorber <phil@omniti.com> 21 января 2013 г. в 23:23:11

Re: CF3+4 (was Re: Parallel query execution) Robert Haas <robertmhaas@gmail.com> 22 января 2013 г. в 00:31:15

Re: CF3+4 (was Re: Parallel query execution) Magnus Hagander <magnus@hagander.net> 22 января 2013 г. в 07:29:34

Re: CF3+4 (was Re: Parallel query execution) Noah Misch <noah@leadboat.com> 16 января 2013 г. в 15:56:24

CF Progress or the lack thereof Andres Freund <andres@2ndquadrant.com> 16 января 2013 г. в 12:06:20

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 13:38:12

Re: Parallel query execution Robert Haas <robertmhaas@gmail.com> 16 января 2013 г. в 12:53:15

Re: Parallel query execution Daniel Farina <daniel@heroku.com> 16 января 2013 г. в 09:37:53

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 13:43:07

Re: Parallel query execution Noah Misch <noah@leadboat.com> 16 января 2013 г. в 16:02:16

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 17:13:59

Re: Parallel query execution Andrew Dunstan <andrew@dunslane.net> 16 января 2013 г. в 14:06:02

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 17:20:30

Re: Parallel query execution Andrew Dunstan <andrew@dunslane.net> 16 января 2013 г. в 17:29:34

Re: Parallel query execution Michael Paquier <michael.paquier@gmail.com> 16 января 2013 г. в 04:37:31

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 17:11:48

Re: Parallel query execution Stephen Frost <sfrost@snowman.net> 16 января 2013 г. в 20:07:17

Re: Parallel query execution Pavel Stehule <pavel.stehule@gmail.com> 16 января 2013 г. в 21:07:36

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 21:18:41

Re: Parallel query execution "Dickson S. Guedes" <listas@guedesoft.net> 16 января 2013 г. в 21:57:05

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 22:01:01

Re: Parallel query execution Jeff Janes <jeff.janes@gmail.com> 17 января 2013 г. в 03:32:32

Re: Parallel query execution Jeff Janes <jeff.janes@gmail.com> 17 января 2013 г. в 01:04:12

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 17 января 2013 г. в 02:45:02

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 17 января 2013 г. в 02:56:25

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 17 января 2013 г. в 03:29:29

Re: Parallel query execution Jeff Janes <jeff.janes@gmail.com> 17 января 2013 г. в 01:04:10

Re: Parallel query execution Claudio Freire <klaussfreire@gmail.com> 17 января 2013 г. в 02:42:11

Re: Parallel query execution Paul Ramsey <pramsey@cleverelephant.ca> 24 января 2013 г. в 22:35:01

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 24 января 2013 г. в 23:17:22

Re: Parallel query execution Simon Riggs <simon@2ndQuadrant.com> 15 января 2013 г. в 22:55:32

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 22:55:26

Re: Parallel query execution Simon Riggs <simon@2ndQuadrant.com> 15 января 2013 г. в 23:01:29

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 23:05:39

Re: Parallel query execution Magnus Hagander <magnus@hagander.net> 16 января 2013 г. в 11:52:48

Re: Parallel query execution Robert Haas <robertmhaas@gmail.com> 16 января 2013 г. в 13:11:11

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 17:16:31

Re: CF3+CF4 WAS: Parallel query execution Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 17:50:19

Re: CF3+CF4 WAS: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 17:56:04

Re: CF3+CF4 WAS: Parallel query execution Josh Berkus <josh@agliodbs.com> 16 января 2013 г. в 18:00:34

Re: Parallel query execution Jeff Janes <jeff.janes@gmail.com> 16 января 2013 г. в 05:35:17

Re: Parallel query execution Michael Paquier <michael.paquier@gmail.com> 16 января 2013 г. в 00:11:24

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 16 января 2013 г. в 02:29:06

Re: Parallel query execution Peter Geoghegan <peter@2ndquadrant.com> 15 января 2013 г. в 22:39:18

Re: Parallel query execution Bruce Momjian <bruce@momjian.us> 15 января 2013 г. в 22:45:24

On Wed, Jan 16, 2013 at 1:32 PM, Bruce Momjian <bruce@momjian.us> wrote:

On Wed, Jan 16, 2013 at 01:28:18PM +0900, Michael Paquier wrote:
>
>
> On Wed, Jan 16, 2013 at 1:22 PM, Josh Berkus <josh@agliodbs.com> wrote:
>
> Claudio, Stephen,
>
> It really seems like the areas where we could get the most "bang for the
> buck" in parallelism would be:
>
> 1. Parallel sort
> 2. Parallel aggregation (for commutative aggregates)
> 3. Parallel nested loop join (especially for expression joins, like GIS)
>
> parallel data load? :/

We have that in pg_restore, and I thinnk we are getting parallel dump in
9.3, right? Unfortunately, I don't see it in the last 9.3 commit-fest.
Is it still being worked on?

Not exactly, I meant something like being able to use parallel processing when doing INSERT or COPY directly in core. If there is a parallel processing infrastructure, it could also be used for such write operations. I agree that the cases mentioned by Josh are far more appealing though...
--

Michael Paquier
http://michael.otacoo.com

В списке pgsql-hackers по дате отправления

Предыдущее

От: Bruce Momjian

Дата: 16 января 2013 г. в 04:33:02

Сообщение: Re: Parallel query execution

Следующее

От: Claudio Freire

Дата: 16 января 2013 г. в 04:47:25

Сообщение: Re: Parallel query execution