Re: Momentary Delay

On 06/08/2015 07:59 AM, Anderson Valadares wrote:

Hi
  We are experiencing an intermittent problem in a GIS database from a
client. Some times of the day is as if the PostgreSQL executed the
slowest operations see below an example. The query was performed three
times, twice I canceled and the third time I left it to end. The
consultation took 10 seconds to finish, but the measured execution time
is 20 ms. As we have several queries that run every 2 seconds when this
momentary delay occurs queries accumulate and burst the limit of 203
connections allowed. The interval of "momentary stop" are approximately
2 seconds occurring at random times and during these stoppages occur no
locks and no increased load on the server is identified. There is a job
2/2 seconds locks collection of information, running queries, etc., nmon
also collects information every 2 seconds.

I do not have an answer, but I do have a question. What does:

"There is a job
2/2 seconds locks collection of information, running queries, etc"

mean?

My client asks what causes

these momentary stops? because it affects all operations of the
database? etc. How do I identify what is causing these delays in
executions of operations in the database?

The Server is a IBM P720 128G RAM PostgreSQL 9.2.9 on
powerpc-ibm-aix7.1.0.0, compiled by gcc (GCC) 4.6.4, 64-bit

Evolution of the number of connections for a period

snap_datetime                       |  #connections
----------------------------------------------+-------------
2015-06-05 09:25:00.954731-03 |74
2015-06-05 09:26:00.249187-03 |205
2015-06-05 09:27:00.826874-03 |207
2015-06-05 09:28:00.374666-03 |73
2015-06-05 09:29:00.690696-03 |75


Occurrence of the problem

citgis=# select max(dvi_sub.dvi_cod_dados_via_iti) as dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
Cancel request sent
ERROR:  canceling statement due to user request
Time: 2555.557 ms
citgis=# select max(dvi_sub.dvi_cod_dados_via_iti) as dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
Cancel request sent
ERROR:  canceling statement due to user request
Time: 2192.572 ms
citgis=# explain analyze select max(dvi_sub.dvi_cod_dados_via_iti) as
dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
Cancel request sent
ERROR:  canceling statement due to user request
Time: 10164.015 ms
citgis=# select now();
               now
-------------------------------
  2015-06-05 09:27:22.006072-03
(1 row)

Time: 0.152 ms
citgis=# select max(dvi_sub.dvi_cod_dados_via_iti) as dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
  dvi_cod_dados_via_iti | via_cod_viagem
-----------------------+----------------
             1059964443 |        7989813
             1060072723 |        7990876
(2 rows)

Time: 5565.175 ms
citgis=# select max(dvi_sub.dvi_cod_dados_via_iti) as dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
  dvi_cod_dados_via_iti | via_cod_viagem
-----------------------+----------------
             1059964445 |        7989813
             1060072725 |        7990876
(2 rows)

Time: 27.944 ms
citgis=# select max(dvi_sub.dvi_cod_dados_via_iti) as dvi_cod_dados_via_iti,
             dvi_sub.via_cod_viagem
              from gis_dvi_dados_viagem_itinerario dvi_sub,
gis_via_viagem via_sub, gis_iti_itinerario iti_sub
              where dvi_sub.via_cod_viagem = via_sub.via_cod_viagem
                and via_sub.via_status_viagem = 'A'
                and via_sub.via_dt_hora_ini > now() - interval '9 hours'
                and iti_sub.lin_cod_linha = 389
                and iti_sub.iti_sentido_itinerario = 'I'
                and iti_sub.iti_cod_itinerario_linha =
via_sub.iti_cod_itinerario_linha
                and dvi_sub.vlo_cod_localizacao is not null
              group by dvi_sub.via_cod_viagem,
iti_sub.iti_cod_itinerario_linha, via_sub.equ_cod_eqpto
;
  dvi_cod_dados_via_iti | via_cod_viagem
-----------------------+----------------
             1059964445 |        7989813
             1060072727 |        7990876
(2 rows)

Time: 24.428 ms

Greetings
   Anderson

--
Adrian Klaver
adrian.klaver@aklaver.com