Невозможно выполнить резервное копирование базы данных postgres
У нас есть postgres 9.1, работающий на Ubuntu. Размер базы данных postgres составляет 155 ГБ, и он содержит около 13200 таблиц. Коробка Ubuntu имеет 120 ГБ оперативной памяти. Ubuntu box является док-контейнером.
Когда была предпринята попытка сделать резервную копию БД, она не смогла сказать:
pg_dump: WARNING: out of shared memory
pg_dump: SQL command failed
pg_dump: Error message from server: ERROR: out of shared memory
HINT: You might need to increase max_locks_per_transaction.
Таким образом, мы увеличили ценность max_locks_per_transaction
до 1024 в postgresql.conf
, но postgres не запустится.
root@abc:# /etc/init.d/postgresql restart
* Restarting PostgreSQL 9.1 database server
* The PostgreSQL server failed to start. Please check the log output:
2018-02-04 03:27:22 UTC FATAL: could not create shared memory segment: Invalid argument
2018-02-04 03:27:22 UTC DETAIL: Failed system call was shmget(key=5432001, size=70123520, 03600).
2018-02-04 03:27:22 UTC HINT: This error usually means that PostgreSQL's request for a shared memory
segment exceeded your kernel's SHMMAX parameter. You can either reduce the request size or reconfigure
the kernel with larger SHMMAX. To reduce the request size (currently 70123520 bytes), reduce PostgreSQL's
shared memory usage, perhaps by reducing shared_buffers or max_connections. If the request size is
already small, it's possible that it is less than your kernel's SHMMIN parameter, in which case raising
the request size or reconfiguring SHMMIN is called for. The PostgreSQL documentation contains more information
about shared memory configuration.
Поэтому, когда мы попытались изменить значение SHMMAX
, это не удалось:
# echo 1134217728 >/proc/sys/kernel/shmmax
bash: /proc/sys/kernel/shmmax: Read-only file system
Есть идеи, что не так и как с этим справиться?
1 ответ
Ubuntu box является док-контейнером.
Контейнеры устанавливают ограничения для памяти и используют пространства имен IPC, а ограничение shm по умолчанию далеко не настолько велико, чтобы запускать большие базы данных. Вам нужно будет настроить верхние пределы в команде запуска. Если контейнер имеет более ста ГБ памяти для использования, вы можете установить достаточно высокий предел shm, возможно, 8 ГБ.
docker run -m 120G --sysctl kernel.shmmax=8589934592 --sysctl kernel.shmall=2097152
Документация PostgreSQL по управлению ресурсами ядра является хорошим справочным материалом, но не упоминает контейнеры.