pgbouncer
pgbouncer — пул соединений Postgres Pro
Синтаксис
В системах Linux:
pgbouncer [-d] [-R] [-v] [-u пользователь] pgbouncer.ini
pgbouncer -V | -h
В Windows:
pgbouncer [-v] [-u пользователь] pgbouncer.ini
pgbouncer -V | -h
Для использования pgbouncer в виде службы Windows есть дополнительные аргументы:
pgbouncer.exe --regservice pgbouncer.ini
pgbouncer.exe --unregservice pgbouncer.ini
Описание
pgbouncer — это программа, управляющая пулом соединений Postgres Pro. Любое конечное приложение может подключиться к pgbouncer, как если бы это был непосредственно сервер Postgres Pro, и pgbouncer создаст подключение к реальному серверу, либо задействует одно из ранее установленных подключений.
Предназначение pgbouncer — минимизировать издержки, связанные с установлением новых подключений к Postgres Pro.
Чтобы не нарушать семантику транзакций при переключении подключений, pgbouncer поддерживает несколько видов пулов:
- Пул сеансов
Наиболее корректный метод. Когда клиент подключается, ему назначается одно серверное подключение на всё время, пока клиент остаётся подключённым. Когда клиент отключается, это подключение к серверу возвращается в пул. Этот метод работает по умолчанию.
- Пул транзакций
Подключение к серверу назначается клиенту только на время транзакции. Когда pgbouncer замечает, что транзакция завершена, это подключение возвращается в пул.
- Пул операторов
Наиболее агрессивный метод. Подключение к серверу будет возвращаться в пул сразу после завершения каждого запроса. Транзакции с несколькими операторами в этом режиме запрещаются, так как они не будут работать.
Административный интерфейс pgbouncer состоит из нескольких новых команд SHOW, доступных при подключении к специальной «виртуальной» базе данных pgbouncer.
Быстрый запуск
Базовая настройка и использование демонстрируются ниже.
Создайте файл
pgbouncer.ini. Подробнее он описывается на странице manpgbouncer(5). Например:[databases] template1 = host=localhost dbname=template1 auth_user=someuser [pgbouncer] listen_port = 6432 listen_addr = localhost auth_type = md5 auth_file = userlist.txt logfile = pgbouncer.log pidfile = pgbouncer.pid admin_users = someuser
Создайте файл
userlist.txtсо списком пользователей, которым разрешено подключение:"некоторый_пользователь" "его_пароль_на_сервере"
Запустите pgbouncer:
$ pgbouncer -d pgbouncer.ini
Примечание
Эта команда не работает в системах Windows. Вместо этого pgbouncer должен запускаться в виде службы, которую необходимо сначала зарегистрировать следующим образом:
pgbouncer --regservice
Сделайте так, чтобы ваше приложение (или клиент
psql) подключалось к pgbouncer, а не к серверу Postgres Pro непосредственно:$ psql -p 6432 -U someuser template1
Для управления pgbouncer подключитесь к специальной административной базе данных pgbouncer и выполните
SHOW HELP;, чтобы ознакомиться с его справкой:$ psql -p 6432 -U someuser pgbouncer pgbouncer=# SHOW HELP; NOTICE: Console usage DETAIL: SHOW [HELP|CONFIG|DATABASES|FDS|POOLS|CLIENTS|SERVERS|SOCKETS|LISTS|VERSION|...] SET key = arg RELOAD PAUSE SUSPEND RESUME SHUTDOWN [...]
Если вы вносили изменения в файл
pgbouncer.ini, его можно перезагрузить командой:pgbouncer=# RELOAD;
Параметры
-d, --daemonЗапустить в фоновом режиме. Без этого указания процесс будет работать на переднем плане. При запуске в фоновом режиме необходимо явное указание параметра
pidfile, а такжеlogfileилиsyslog. В фоновом режиме сообщения не будут записываться в stderr.Примечание
Это не работает в Windows, там pgbouncer нужно запускать в виде службы.
-R, --rebootПримечание
Этот параметр устарел. Вместо него следует применять последовательный перезапуск с несколькими процессами pgbouncer с одним и тем же принимающим портом, используя
so_reuseport.Выполнить перезапуск на «лету». При этом pgbouncer подключается к работающему процессу, забирает у него открытые сокеты и начинает использовать их. Если активного процесса нет, он запускается в обычном режиме.
Примечание
Это работает, только если ОС поддерживает сокеты Unix и в конфигурации определён параметр
unix_socket_dir. Не работает в Windows. Также при этом не поддерживаются подключения TLS, они сбрасываются.-uпользователь, --userпользовательПереключиться на заданного пользователя при запуске.
-v, --verboseУвеличить детализацию вывода. Может использоваться неоднократно.
-q, --quietПриглушить вывод: не выводить ничего в stderr. Это не влияет на уровень выводимых сообщений, а только отключает вывод в stderr. Предназначено для применения в скриптах
init.d.-V, --versionВывести версию.
-h, --helpВывести короткую справку.
--regserviceWin32: Зарегистрировать pgbouncer в качестве службы Windows. Имя службы будет определяться значением параметра конфигурации
service_name.--unregserviceWin32: Разрегистрировать службу Windows.
Административная консоль
Эта консоль доступна при обычном подключении к базе pgbouncer:
$ psql -p 6432 pgbouncer
Подключаться к этой консоли разрешено только пользователям, перечисленным в параметрах конфигурации admin_users или stats_users. (За исключением режима auth_mode=any, когда в качестве stats_user может подключиться любой пользователь.)
Кроме того, пользователю pgbouncer разрешено подключение без пароля, если это подключение устанавливается через сокет Unix и у клиента тот же uid пользователя Unix, что и у работающего процесса.
Административная консоль в настоящее время поддерживает только простой протокол запросов. Некоторые драйверы используют расширенный протокол запросов для всех команд; эти драйверы не будут работать в данном случае.
Команды вывода информации
Команды SHOW выводят полезную информацию. Каждая команда описана ниже.
SHOW STATS
Выводит статистику. Выводимые этой и связанными командами суммарные значения, накапливаемые с момента запуска pgbouncer, и средние значения обновляются с периодичностью stats_period.
databaseБаза данных, для которой представлена статистика.
total_xact_countОбщее число транзакций SQL, прошедших через pgbouncer.
total_query_countОбщее число SQL-запросов, прошедших через pgbouncer.
total_receivedОбщий объём сетевого трафика (в байтах), который получил pgbouncer.
total_sentОбщий объём сетевого трафика (в байтах), который передал pgbouncer.
total_xact_timeОбщее время (в микросекундах), в течение которого pgbouncer использовал подключения к Postgres Pro, выполняя запросы или простаивая.
total_query_timeОбщее время (в микросекундах), в течение которого pgbouncer активно использовал подключения к Postgres Pro, выполняя запросы.
total_wait_timeСреднее время ожидания ответов сервера в течение секунды (в микросекундах). Сбрасывается, когда клиентскому подключению назначается серверное подключение.
avg_xact_countСреднее число транзакций в секунду за последний период статистики.
avg_query_countСреднее число запросов в секунду за последний период статистики.
avg_recvСредняя скорость получения данных от клиентов (байт в секунду).
avg_sentСредняя скорость передачи данных клиентам (байт в секунду).
avg_xact_timeСредняя длительность транзакции (в микросекундах).
avg_query_timeСредняя длительность запроса (в микросекундах).
avg_wait_timeСреднее время ожидания ответов сервера клиентами, для которых было назначено серверное подключение в текущем интервале
stats_period, в микросекундах (в среднем в секунду за этот интервал).
SHOW STATS_TOTALS
Выводит подмножество результатов SHOW STATS, включающее только суммарные значения (total_).
SHOW STATS_AVERAGES
Выводит подмножество результатов SHOW STATS, включающее только средние значения (avg_).
SHOW TOTALS
Выводит ту же статистику, что SHOW STATS, но по всем базам данных в целом.
SHOW SERVERS
type«S» для серверов
userИмя пользователя, с которым pgbouncer подключается к серверу.
databaseИмя базы данных.
stateСостояние подключения pgbouncer к серверу, один из вариантов:
active,idle,used,tested,new,active_cancelилиbeing_canceled.addrIP-адрес сервера Postgres Pro.
portПорт сервера Postgres Pro.
local_addrИсходный адрес подключения на локальной машине.
local_portИсходный порт подключения на локальной машине.
connect_timeВремя установления подключения.
request_timeВремя выдачи последнего запроса.
waitНе используется для серверных подключений.
wait_usНе используется для серверных подключений.
close_needed1, если соединение будет закрыто при ближайшей возможности в связи с выполнением команды
RECONNECTлибо в связи с изменением параметров соединения, вызванным перезагрузкой файла конфигурации или изменениями в DNS.ptrАдрес внутреннего объекта для данного подключения. Используется как уникальный идентификатор.
linkАдрес клиентского подключения, с которым связан сервер.
remote_pidИдентификатор обслуживающего серверного процесса (PID). Когда подключение выполняется через сокет Unix и ОС может выдать PID процесса, это PID, полученный от ОС. В противном случае этот идентификатор извлекается из пакета для отмены, переданного сервером; это будет интересующий PID при подключении к серверу Postgres Pro, но если подключение обслуживает другой pgbouncer, это будет случайное число.
tlsИнформация о TLS-подключении; пустая строка, если TLS не используется.
application_nameСтрока, содержащая параметр
application_name, заданный для связанного клиентского подключения, или пустая строка, если он не задан или если подключение отсутствует.
SHOW CLIENTS
type«C» для клиентов.
userПользователь, подключённый со стороны клиента.
databaseИмя базы данных.
stateСостояние клиентского подключения:
active,waiting,active_cancel_reqилиwaiting_cancel_req.addrIP-адрес клиента.
portПорт клиента.
local_addrКонечный адрес подключения на локальной машине.
local_portКонечный порт подключения на локальной машине.
connect_timeВремя установления подключения.
request_timeВремя последнего запроса клиента.
waitТекущая длительность ожидания (в секундах).
wait_usДробная часть текущей длительности ожидания (в микросекундах).
close_neededНе используется для клиентов.
ptrАдрес внутреннего объекта для данного подключения. Используется как уникальный идентификатор.
linkАдрес серверного подключения, с которым связан клиент.
remote_pidИдентификатор процесса (PID), в случае, если клиент подключается через сокет UNIX и ОС может выдать этот идентификатор.
tlsИнформация о TLS-подключении; пустая строка, если TLS не используется.
application_nameСтрока, содержащая параметр
application_name, заданный клиентом для данного подключения, или пустая строка, если он не задан или если подключение отсутствует.
SHOW POOLS
Новый пул создаётся для каждой пары сущностей (база данных, пользователь).
databaseИмя базы данных.
userИмя пользователя.
cl_activeЧисло клиентских подключений, которые либо связаны с подключениями к серверу, либо простаивают без запросов, ожидающих обработки.
cl_waitingЧисло клиентских подключений, которые отправили запросы, но ещё не получили подключения к серверу.
cl_active_cancel_reqЧисло клиентских подключений, которые передали серверу команды отмены запроса и ожидают ответ сервера.
cl_waiting_cancel_reqЧисло клиентских подключений, для которых серверу в данный момент передаются команды отмены запросов.
sv_activeЧисло серверных подключений, связанных с клиентами.
sv_active_cancelЧисло серверных подключений, для которых в данный момент передаются команды отмены запросов.
sv_being_canceledСерверы, которые должны простаивать, но ждут, пока не будут завершены все текущие команды отмены запросов, отправленные этим серверам.
sv_idleЧисло серверных подключений, которые не используются и могут немедленно задействоваться для запросов клиентов.
sv_usedЧисло серверных подключений, которые простаивают дольше
server_check_delay, поэтому перед повторным использованием для них нужно выполнятьserver_check_query.sv_testedЧисло серверных подключений, для которых в данный момент выполняются запросы
server_reset_queryилиserver_check_query.sv_loginЧисло серверных подключений, через которые в данный момент выполняется вход на сервер.
maxwaitПоказывает, как долго ожидает в очереди самый первый клиент (в секундах). Если это число начинает увеличиваться, значит текущий пул серверов не справляется с запросами достаточно быстро. Причиной тому может быть перегруженный сервер, либо просто слишком маленький размер пула (параметр
pool_size).maxwait_usДробная часть максимального времени ожидания (в микросекундах).
pool_modeДействующий режим пула.
SHOW PEER_POOLS
Для каждого настроенного узла создаётся новая запись peer_pool.
databaseИдентификатор настроенной записи узла.
cl_active_cancel_reqЧисло клиентских подключений, которые передали серверу команды отмены запроса и ожидают ответ сервера.
cl_waiting_cancel_reqЧисло клиентских подключений, для которых серверу в данный момент передаются команды отмены запросов.
sv_active_cancelЧисло серверных подключений, для которых в данный момент передаются команды отмены запросов.
sv_loginЧисло серверных подключений, через которые в данный момент выполняется вход на сервер.
SHOW LISTS
Показывает следующие внутренние сведения, в столбцах (не строках):
databasesЧисло баз данных.
usersЧисло пользователей.
poolsЧисло пулов.
free_clientsЧисло свободных клиентов.
used_clientsЧисло активных клиентов.
login_clientsЧисло клиентов в состоянии входа (
login).free_serversЧисло свободных серверов.
used_serversЧисло задействованных серверов.
dns_namesКоличество имён DNS в кеше.
dns_zonesКоличество зон DNS в кеше.
dns_queriesКоличество выполняющихся запросов к DNS.
dns_pendingНе используется.
SHOW USERS
nameИмя пользователя.
pool_modeПереопределение
pool_modeдля пользователя либоNULL, если должен использоваться режим по умолчанию.
SHOW DATABASES
nameИмя настроенной записи базы данных.
hostУзел, к которому подключается pgbouncer.
portПорт, к которому подключается pgbouncer.
databaseРеальное имя базы данных, к которой подключается pgbouncer.
force_userКогда пользователь указан в строке соединения, подключение между pgbouncer и Postgres Pro должно устанавливаться от его имени, вне зависимости от пользователя на стороне клиента.
pool_sizeМаксимальное число серверных подключений.
min_pool_sizeМинимальное число серверных подключений.
reserve_poolМаксимальное число дополнительных подключений для этой базы данных.
pool_modeПереопределение pool_mode для базы данных либо
NULL, если должен использоваться режим по умолчанию.max_connectionsМаксимально возможное число подключений для этой базы, установленное либо глобально, параметром
max_db_connections, либо на уровне базы.current_connectionsТекущее число подключений для этой базы.
paused1, если база данных находится в состоянии паузы, иначе — 0.
disabled1, если база данных находится в отключённом состоянии, иначе — 0.
SHOW PEERS
peer_idИдентификатор настроенной записи узла.
hostУзел, к которому подключается pgbouncer.
portПорт, к которому подключается pgbouncer.
pool_sizeМаксимальное число серверных подключений, которое можно установить для этого узла.
SHOW FDS
Внутренняя команда, которая показывает список файловых дескрипторов и их внутреннее состояние.
При подключении пользователя с именем pgbouncer через сокет Unix из процесса с UID, совпадающим с UID текущего процесса, ему передаются реальные файловые дескрипторы. Это применяется для выполнения перезагрузки «на лету».
Примечание
В Windows это не работает.
Эта команда также блокирует внутренний цикл событий, так что её не следует выполнять, когда pgbouncer используется.
fdЧисловое значение файлового дескриптора (ФД).
taskПредназначение; возможны следующие варианты:
pooler,clientилиserver.userПользователь подключения, занимающего этот ФД.
databaseБаза данных подключения, занимающего этот ФД.
addrIP-адрес подключения, занимающего данный ФД;
unix, если это сокет Unix.portПорт подключения, занимающего данный ФД.
cancelКлюч отмены для данного подключения.
linkФайловый дескриптор ответной стороны сервера/клиента.
NULL, если подключение простаивает.
SHOW SOCKETS, SHOW ACTIVE_SOCKETS
Выводит низкоуровневую информацию обо всех или только активных сокетах. В вывод включается информация, выводимая командами SHOW CLIENTS и SHOW SERVERS, а также дополнительные сведения низкого уровня.
SHOW CONFIG
Выводит текущие параметры конфигурации, по одному в строке со следующими столбцами:
keyИмя переменной конфигурации.
valueЗначение переменной конфигурации.
defaultЗначение по умолчанию.
changeableЗначение
yesилиno, показывающее, можно ли изменить переменную во время работы. Если значениеno, переменная может быть изменена только при перезагрузке. Чтобы изменить переменную во время работы, воспользуйтесь командойSET.
SHOW MEM
Выводит низкоуровневую информацию о размере различных блоков памяти, выделенных для внутреннего использования. Эта информация имеет динамическую природу и может меняться.
SHOW DNS_HOSTS
Выводит имена узлов, содержащиеся в кеше DNS.
hostnameИмя узла.
ttlСколько секунд остаётся до очередного внешнего поиска.
addrsСписок адресов, разделённых запятыми.
SHOW DNS_ZONES
Показывает зоны DNS в кеше.
zonenameИмя зоны.
serialТекущий серийный номер.
countИмена узлов, относящихся к этой зоне.
SHOW VERSION
Показывает строку с версией pgbouncer.
SHOW STATE
Показывает параметры состояния pgbouncer. Текущие состояния: активное, состояние паузы и приостановленное.
Команды управления процессом
PAUSE [бд]
pgbouncer пытается отключиться от всех серверов. При закрытии каждого подключения к серверу ожидается освобождение этого подключения в соответствии с режимом пула серверов (в режиме пула транзакций должна завершиться транзакция, в режиме пула операторов должен завершиться оператор, а в режиме пула сеансов должен отключиться клиент). Выполнение этой команды заканчивается, только когда отключатся все подключения. Эта команда должна применяться во время перезапуска базы данных.
Если указано имя базы данных, будет приостановлена работа только с ней.
Новые подключения клиентов к базе, поставленной на паузу, будут находиться в состоянии ожидания, пока не будет выполнена команда RESUME.
DISABLE бд
Запрещает любые новые подключения клиентов к указанной базе данных.
ENABLE бд
Разрешает новые подключения клиентов после предыдущей команды DISABLE.
RECONNECT бд
Закрывает все открытые подключения к указанной базе (или ко всем базам) по мере их освобождения в соответствии с режимом пула, не дожидаясь окончания времени жизни подключений. При этом немедленно могут быть установлены новые подключения к серверу, согласно текущим параметрам пула.
Эта команда может быть полезна, когда изменяется конфигурация подключения к серверу, например, нужно постепенно переключиться на новый сервер. Эту команду не нужно выполнять, если вы меняете строку соединения в pgbouncer.ini и перезагружаете конфигурацию (см. RELOAD) или когда меняются адреса в DNS, так как равнозначное действие будет выполнено автоматически. Эта команда может быть полезна, только если подключения pgbouncer маршрутизируются какими-то внешними средствами.
После выполнения этой команды возможен длительный период, когда будут существовать и старые подключения, и новые. Это может иметь значение только при переключении трафика между читающими репликами или при переключении между узлами в конфигурации с несколькими ведущими. Если необходимо переключить все подключения сразу, рекомендуется использовать команду PAUSE. Чтобы закрыть подключения экстренно (например, когда произвести переключение нужно не постепенно, а срочно), вы можете воспользоваться командой KILL.
KILL бд
Немедленно закрывает все клиентские и серверные подключения к указанной базе данных, деактивируя её.
Новые подключения клиентов к деактивированной базе будут находиться в состоянии ожидания, пока не будет выполнена команда RESUME.
SUSPEND
Все буферы сокетов очищаются и pgbouncer прекращает принимать данные через них. Выполнение этой команды заканчивается, только когда все буферы будут очищены. Эта команда должна применяться, когда pgbouncer перезагружается «на лету».
Новые подключения клиентов к приостановленной базе будут находиться в состоянии ожидания, пока не будет выполнена команда RESUME.
RESUME [бд]
Восстанавливает работу после предыдущей команды KILL, PAUSE или SUSPEND.
SHUTDOWN
Приводит к завершению процесса pgbouncer.
RELOAD
Указывает процессу pgbouncer перезагрузить файлы конфигурации и обновить значения изменяемых параметров, а именно основной файл конфигурации, а также файлы, указанные в параметрах auth_file и auth_hba_file.
pgbouncer отслеживает изменения в файле конфигурации, затрагивающие подключения к базе данных. Существующие подключения со старыми параметрами будут закрыты при ближайшем освобождении этих подключений (в соответствии с режимом пула), а новые подключения к серверу немедленно начнут использовать изменившиеся параметры соединения.
WAIT_CLOSE [бд]
Ожидает, пока для всех серверных подключений к указанной базе (или ко всем базам) не сбросится признак close_needed (см. Подраздел «SHOW SERVERS»). Эту команду можно вызвать после RECONNECT или RELOAD, чтобы, например, в скриптах переключения узлов, дождаться применения изменений конфигураций в полном объёме.
Другие команды
SET ключ = аргумент
Изменяет параметр конфигурации (см. также Подраздел «SHOW CONFIG»). Например:
SET log_connections = 1; SET server_check_query = 'select 2';
(Заметьте, что эта команда выполняется в консоли администратора pgbouncer и задаёт параметры pgbouncer. Команда SET, выполненная в другой базе данных, будет передана на выполнению серверу Postgres Pro, как и любая другая SQL-команда.)
Сигналы
SIGHUPПерезагрузка конфигурации. Равносильно выполнению команды
RELOADв консоли.SIGINTБезопасное отключение. Равносильно выполнению команд
PAUSEиSHUTDOWNв консоли.SIGTERMНемедленное отключение. Равносильно выполнению команды
SHUTDOWNв консоли.SIGUSR1Равносильно выполнению команды
PAUSEв консоли.SIGUSR2Равносильно выполнению команды
PAUSEв консоли.
Параметры libevent
Из документации libevent:
Поддержку
epoll,kqueue,devpoll,pollилиselectможно отключить, установив переменную окружения