HOWTO: Обновление версии PostgreSQL: различия между версиями

Материал из WiKi - UserSide
Нет описания правки
 
(не показано 19 промежуточных версий 2 участников)
Строка 1: Строка 1:
В данном разделе описана процедура обновления сервера PostgreSQL на новую основную версию (например, с 9.х на 11.х). Вы также можете обновиться на максимально доступную версию на момент выполнения обновления - все они обратно совместимы.
[[HOWTO:_PostgreSQL_version_upgrade|en]] | [[HOWTO:_Обновление_версии_PostgreSQL|ru]]


Мы рекомендуем выполнять процедуру обновления сервера квалифицированным сотрудником используя официальную инструкцию: https://postgrespro.ru/docs/postgresql/11/upgrading.
В данном разделе описана процедура обновления PostgreSQL ''между основными версиями'' (например, с версии 11 на версию 16).


Обновление в пределах основной версии (например, с 11.1 на 11.3) осуществляется без каких либо дополнительных действий.
Обновление внутри версии (например, с версии 16.1 на версию 16.2) ''происходит автоматически и не требует дополнительных действий''.


Существует несколько способов обновления. Здесь будет рассмотрен способ с полным дампом перед восстановлением и затем восстановлением из дампа после обновления. Также процедура будет описана для ОС Debian и ее производных (Ubuntu и т.д.). Для других дистрибутивов и ОС процедура практически точно такая же, но используются другие утилиты, специфичные для конкретного дистрибутива или ОС.
'''Рекомендуем ознакомиться с официальными инструкциями по обновлению''' на сайте [https://www.postgresql.org/docs/current/upgrading.html postgresql.org].


Предполагается, что установка PostgreSql осуществлялась по этой инструкции и в систему добавлены репозитории PostgreSql, предоставляющие доступ к различным версиям PostgreSql и расширениям, а также установка производилась по этой инструкции и был установлен пакет '''postgresql-9.6''', а не ''метапакет'' postgresql. Если у вас установлен метапакет, то обновление должно произойти автоматически при обновлении метапакета, но не факт, что оно пройдет корректно. Мы рекомендуем использовать конкретные пакеты (с указанием версии) вместо метапакетов.
В дистрибутиве Debian и основанных на нем существует пакет [https://packages.debian.org/sid/postgresql-common postgresql-common], устанавливаемый автоматически при установке пакета PostgreSQL. В состав postgresql-common входят инструменты, упрощающие работу с кластерами баз данных PostgreSQL. В том числе и обновление кластеров БД.


Если в процессе обновления не удается успешно выполнить какую-то команду, пожалуйста, не продолжайте выполнять остальные пункты, пока не решите проблему. К сожалению, мы не являемся специалистами по всем проблемам PostgreSql, а также остальных служб, поэтому не всегда сможем дать квалифицированный ответ.
Кластером баз данных ([https://www.postgresql.org/docs/current/glossary.html Database cluster]) в PostgreSQL называется экземпляр сервера вместе со всеми обслуживаемыми БД, а не распределенную систему, как может показаться.


1. Остановите работу всех систем, использующих базу данных. Остановите работу php-fpm или apache2, а также временно отключите задачи в cron и остановите работающие модули usm_*.
В следующем примере будет показано обновление кластера БД с версии 11 на версию 16 используя инструменты из пакета '''postgresql-common'''.


2. Проверьте, какие версии PostgreSql и PostGis у вас установлены на данный момент:
== Порядок обновления ==
sudo -u postgres psql -d userside -A -c "SELECT VERSION()"
# Остановить USERSIDE.
sudo -u postgres psql -d userside -A -c "SELECT PostGIS_full_version()"
# Обновить текущую версии postgresql в пределах основной версии (например, с 11.5 до 11.22).
# Обновить расширение postgis до самой последней версии (например, с 2.5 до 3.3.4). Также обязательно обновить расширение и в самой базе данных.
# Установить новую версию postgresql не удаляя старой (например 16.1)
# Сделать запасную резервную копию базы данных и настроек
# Удалить кластер БД, созданный автоматически сценарием при установке новой версии
# Выполнить обновление кластера БД старой версии до кластера новой версии
# Проверить работу USERSIDE
# Удалить кластер БД старой версии, устаревшие пакеты и запасные резервные копии


3. Обновите текущие версии, а также, если у вас установлен PostGis 2.4, установите PostGis 2.5 и обновите это расширение в базе данных, затем убедитесь, что расширение в базе данных обновлено:
Выделите время на эту операцию. Она может занять довольно продролжительное время в зависимости от размера базы данных и производительности сервера. Также обязательно убедитесь в наличии свободного места, которое понадобится для обновления кластера (как минимум столько же, сколько занимает текущий кластер, но лучше больше).
sudo apt-get update
sudo apt-get --only-upgrade install postgresql-9.6 postgresql-9.6-postgis-2.4 -y
sudo apt-get install postgresql-9.6-postgis-2.5 -y
sudo -u postgres psql -d userside -A -c "ALTER EXTENSION postgis UPDATE"
sudo -u postgres psql -d postgres -A -c "ALTER EXTENSION postgis UPDATE"
sudo -u postgres psql -d userside -A -c "SELECT PostGIS_full_version()"
sudo -u postgres psql -d postgres -A -c "SELECT PostGIS_full_version()"


4. Установите новую версию PostgreSql и PostGis не удаляя старой(!).
[https://asciinema.org/a/do2AE0z30mg5JLIuI9zhGTPoR Посмотреть видеоинструкцию на asciinema].
sudo apt-get install postgresql-11 postgresql-11-postgis-2.5 -y


5. Выполните запасное резервное копирование всех баз данных сервера (в данном случае будет использоваться последняя версия утилиты pg_dumpall, но база данных будет использоваться все еще прежняя):
== Пошаговая инструкция ==
sudo -u postgres pg_dumpall > /tmp/dump_9.6_before_update.dump
SQL-запросы с оператором <code>SELECT</code>, приведенные далее, необходимы для определения текущих установленных версий в качестве справочной информации.


6. Посмотрите, как выглядят ваши кластеры. Сейчас вы должны видеть две версии, обе в состоянии онлайн:
=== Остановить USERSIDE ===
pg_lsclusters
<pre>
Вы должны увидеть таблицу:
sudo supervisorctl stop all
Ver Cluster Port Status Owner    Data directory
sudo systemctl stop php8.1-fpm
9.6 main    5432 online postgres /var/lib/postgresql/9.6/main
</pre>
11  main    5433 online postgres /var/lib/postgresql/11/main
Версия php указана для примера. Используйте ту, что испльзуется у вас.


7. При установке PostgreSql, установщик автоматически создает кластер с конфигурацией и базами данных, чтобы можно было начинать работу с базой данных сразу же. В случае обновления это лишняя операция и кластер для 11 версии нужно удалить. Мы будем его создавать на основе кластера версии 9.6:
Закомментируйте запуск всех модулей и userside в crontab.
sudo pg_dropcluster 11 main --stop


8. Остановите работу службы
=== Обновить текущую версии postgresql в пределах основной версии ===
sudo systemctl stop postgresql
Проверить текущие версии. Обновить текущие пакеты PostgreSQL и PostGIS:
<pre>
sudo -u postgres psql -d userside -A -t -c "SELECT VERSION()"
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"


9. Сделайте запасное резервное копирование текущих каталогов с файлами базы данных и файлами конфигураций. Будьте осторожны, файлы базы данных могут занимать очень много места, поэтому, возможно, будет лучше выбрать другое место для их размещения. Позже, если обновление пройдет успешно, эти каталоги нужно будет удалить:
sudo apt update
sudo cp -r /var/lib/postgresql/9.6/main/ /tmp/pg9.6-lib
sudo apt install --only-upgrade -y postgresql-11 postgresql-11-postgis-2.5
sudo cp -r /etc/postgresql/9.6/main/ /tmp/pg9.6-etc
</pre>
Вместо 11 и 2.5 укажите те версии, которе фактически установлены у вас.


10. Запустите процедуру создания нового кластера на основе старого (обновление версии кластера):
=== Обновить расширение postgis до самой последней версии ===
sudo pg_upgradecluster -m upgrade 9.6 main
Обязательно также обновить расширение в базе данных!
<pre>
sudo apt install -y postgresql-11-postgis-3


11. Запустите службу:
sudo -u postgres psql -d userside -A -t -c "ALTER EXTENSION postgis UPDATE"
sudo systemctl start postgresql
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"
</pre>


12. Посмотрите, как выглядят ваши кластеры:
=== Установить новую версию postgresql не удаляя старой ===
pg_lsclusters
<pre>
Теперь вы должны увидеть вот такую таблицу, в которой версия 9.6 находится в состоянии down:
sudo apt install -y postgresql-16 postgresql-16-postgis-3
Ver Cluster Port Status Owner    Data directory
</pre>
9.6 main    5433 down  postgres /var/lib/postgresql/9.6/main
11  main    5432 online postgres /var/lib/postgresql/11/main


13. Проверьте версии:
=== Сделать запасную резервную копию базы данных и настроек ===
sudo -u postgres psql -d userside -A -c "SELECT VERSION()"
Число 11 в имени файлов — это номер версии PostgreSQL, к которой относится эта резервная копия.
sudo -u postgres psql -d userside -A -c "SELECT PostGIS_full_version()"
<pre>
sudo -u postgres pg_dump --no-acl -Fp -Z 5 userside --file=/backup/userside_emergency_11.sql.gz
sudo -u postgres pg_dump --no-acl -Fc userside --file=/backup/userside_emergency_11.dump
sudo tar czf /backup/postgres_config_emergency_11.tgz -C /etc/postgresql/11/main .
</pre>
Каталог /backup должен существовать и должен быть доступен для записи всем пользователям.


14. Запустите все службы, которые вы остановили в п.1 и проверьте работу USERSIDE и модулей. Убедитесь, что всё работает корректно.
=== Удалить кластер БД, созданный автоматически сценарием при установке новой версии ===
При помощи утилиты <code>pg_lsclusters</code> из postgresql-common посмотрите, как выглядят ваши кластеры БД:
<pre>
sudo pg_lsclusters
</pre>
Вывод команды будет примерно следующим:
<pre>
Ver Cluster Port Status Owner    Data directory              Log file
11  main    5432 online postgres /var/lib/postgresql/11/main /var/log/postgresql/postgresql-11.log
16  main    5433 online postgres /var/lib/postgresql/16/main /var/log/postgresql/postgresql-16.log
</pre>
Кластер 16/main был создан автоматически сценарием установки postgresql. Его нужно остановить и удалить.
<pre>
sudo pg_dropcluster 16 main --stop
</pre>
Повторное выполнение команды <code>pg_lsclusters</code> должно показать, что у вас остался один кластер '''11/main'''.


15. После того, как вы убедились, что всё работает корректно, можно удалить временные резервные копии, а также старые пакеты:
=== Выполнить обновление кластера БД старой версии до кластера новой версии ===
  sudo pg_dropcluster 9.6 main --stop
Остановите службу postgresql
  sudo apt-get purge postgresql-9.6 postgresql-9.6-postgis-2.4 postgresql-9.6-postgis-2.5 -y
<pre>
sudo apt autoremove -y
sudo systemctl stop postgresql
sudo rm -rf /tmp/pg9.6-* /tmp/dump_9.6_before_update.dump
</pre>
Запустите процесс обновления кластера БД '''11/main''' используя утилиту <code>pg_upgradecluster</code> из пакета postgresql-common. Это действие может занять много времени и дискового пространства.
<pre>
sudo pg_upgradecluster -m upgrade 11 main
</pre>
После завершения операции обновления вы увидите новое состояние кластеров (старая версия должна находиться в режиме '''down'''):
<pre>
Ver Cluster Port Status Owner    Data directory              Log file
11 main   5433 down  postgres /var/lib/postgresql/11/main /var/log/postgresql/postgresql-11.log
16 main    5432 online postgres /var/lib/postgresql/16/main /var/log/postgresql/postgresql-16.log
</pre>
Запустите службу postgres
<pre>
sudo systemctl start postgresql
</pre>


Обновление PostgreSQL завершено.
=== Проверить работу USERSIDE ===
Сначала выполните команды, отображающие версии, чтобы убедиться что база данных теперь работает на кластере БД новой версии:
<pre>
sudo -u postgres psql -d userside -A -t -c "SELECT VERSION()"
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"
</pre>
Вы должны увидеть 16ю версию postgresql и 3.3.4 версию postgis. Может быть к тому времени, как вы будете читать эти строки, версия postgis будет более новой.


Видеоинструкция: https://youtu.be/c9ULVSz8yQM
Теперь запустите службу FPM и зайдите в USERSIDE через браузер.
<pre>
sudo systemctl start php8.1-fpm
</pre>
Так как другие службы остановлены, вы, вероятно, увидите ошибки связанные с ними, но при этом интерфейс USERSIDE должен открыться без ошибок подключения к базе данных.
Если все успешно, то раскомментируйте закомментированные ранее строки в crontab и запустите внешние службы, находящиеся под управлением supervisor:
<pre>
sudo supervisorctl start all
sudo supervisorctl status
</pre>
 
=== Удалить кластер БД старой версии, устаревшие пакеты и запасные резервные копии ===
Если USERSIDE работает корректно, ошибок взаимодействия с БД нет, то можно удалить старый кластер и пакеты. Вы также, по желанию, можете удалить аварийные резервные копии или подождать несколько дней, чтобы точно убедиться, что они не пригодятся.
<pre>
sudo pg_dropcluster 11 main --stop
sudo apt purge -y postgresql-11 postgresql-11-postgis-2.5 postgresql-11-postgis-3
sudo apt autoremove -y
sudo rm /backup/userside_emergency_11* /backup/postgres_config_emergency_11.tgz
sudo rm -rf /var/lib/postgresql/11/main
</pre>

Текущая версия от 06:57, 24 января 2024

en | ru

В данном разделе описана процедура обновления PostgreSQL между основными версиями (например, с версии 11 на версию 16).

Обновление внутри версии (например, с версии 16.1 на версию 16.2) происходит автоматически и не требует дополнительных действий.

Рекомендуем ознакомиться с официальными инструкциями по обновлению на сайте postgresql.org.

В дистрибутиве Debian и основанных на нем существует пакет postgresql-common, устанавливаемый автоматически при установке пакета PostgreSQL. В состав postgresql-common входят инструменты, упрощающие работу с кластерами баз данных PostgreSQL. В том числе и обновление кластеров БД.

Кластером баз данных (Database cluster) в PostgreSQL называется экземпляр сервера вместе со всеми обслуживаемыми БД, а не распределенную систему, как может показаться.

В следующем примере будет показано обновление кластера БД с версии 11 на версию 16 используя инструменты из пакета postgresql-common.

Порядок обновления

  1. Остановить USERSIDE.
  2. Обновить текущую версии postgresql в пределах основной версии (например, с 11.5 до 11.22).
  3. Обновить расширение postgis до самой последней версии (например, с 2.5 до 3.3.4). Также обязательно обновить расширение и в самой базе данных.
  4. Установить новую версию postgresql не удаляя старой (например 16.1)
  5. Сделать запасную резервную копию базы данных и настроек
  6. Удалить кластер БД, созданный автоматически сценарием при установке новой версии
  7. Выполнить обновление кластера БД старой версии до кластера новой версии
  8. Проверить работу USERSIDE
  9. Удалить кластер БД старой версии, устаревшие пакеты и запасные резервные копии

Выделите время на эту операцию. Она может занять довольно продролжительное время в зависимости от размера базы данных и производительности сервера. Также обязательно убедитесь в наличии свободного места, которое понадобится для обновления кластера (как минимум столько же, сколько занимает текущий кластер, но лучше больше).

Посмотреть видеоинструкцию на asciinema.

Пошаговая инструкция

SQL-запросы с оператором SELECT, приведенные далее, необходимы для определения текущих установленных версий в качестве справочной информации.

Остановить USERSIDE

sudo supervisorctl stop all
sudo systemctl stop php8.1-fpm

Версия php указана для примера. Используйте ту, что испльзуется у вас.

Закомментируйте запуск всех модулей и userside в crontab.

Обновить текущую версии postgresql в пределах основной версии

Проверить текущие версии. Обновить текущие пакеты PostgreSQL и PostGIS: 

sudo -u postgres psql -d userside -A -t -c "SELECT VERSION()"
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"

sudo apt update
sudo apt install --only-upgrade -y postgresql-11 postgresql-11-postgis-2.5

Вместо 11 и 2.5 укажите те версии, которе фактически установлены у вас.

Обновить расширение postgis до самой последней версии

Обязательно также обновить расширение в базе данных! 

sudo apt install -y postgresql-11-postgis-3

sudo -u postgres psql -d userside -A -t -c "ALTER EXTENSION postgis UPDATE"
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"

Установить новую версию postgresql не удаляя старой

sudo apt install -y postgresql-16 postgresql-16-postgis-3

Сделать запасную резервную копию базы данных и настроек

Число 11 в имени файлов — это номер версии PostgreSQL, к которой относится эта резервная копия. 

sudo -u postgres pg_dump --no-acl -Fp -Z 5 userside --file=/backup/userside_emergency_11.sql.gz
sudo -u postgres pg_dump --no-acl -Fc userside --file=/backup/userside_emergency_11.dump
sudo tar czf /backup/postgres_config_emergency_11.tgz -C /etc/postgresql/11/main .

Каталог /backup должен существовать и должен быть доступен для записи всем пользователям.

Удалить кластер БД, созданный автоматически сценарием при установке новой версии

При помощи утилиты pg_lsclusters из postgresql-common посмотрите, как выглядят ваши кластеры БД: 

sudo pg_lsclusters

Вывод команды будет примерно следующим: 

Ver Cluster Port Status Owner    Data directory              Log file
11  main    5432 online postgres /var/lib/postgresql/11/main /var/log/postgresql/postgresql-11.log
16  main    5433 online postgres /var/lib/postgresql/16/main /var/log/postgresql/postgresql-16.log

Кластер 16/main был создан автоматически сценарием установки postgresql. Его нужно остановить и удалить. 

sudo pg_dropcluster 16 main --stop

Повторное выполнение команды pg_lsclusters должно показать, что у вас остался один кластер 11/main.

Выполнить обновление кластера БД старой версии до кластера новой версии

Остановите службу postgresql 

sudo systemctl stop postgresql

Запустите процесс обновления кластера БД 11/main используя утилиту pg_upgradecluster из пакета postgresql-common. Это действие может занять много времени и дискового пространства. 

sudo pg_upgradecluster -m upgrade 11 main

После завершения операции обновления вы увидите новое состояние кластеров (старая версия должна находиться в режиме down): 

Ver Cluster Port Status Owner    Data directory              Log file
11  main    5433 down   postgres /var/lib/postgresql/11/main /var/log/postgresql/postgresql-11.log
16  main    5432 online postgres /var/lib/postgresql/16/main /var/log/postgresql/postgresql-16.log

Запустите службу postgres 

sudo systemctl start postgresql

Проверить работу USERSIDE

Сначала выполните команды, отображающие версии, чтобы убедиться что база данных теперь работает на кластере БД новой версии: 

sudo -u postgres psql -d userside -A -t -c "SELECT VERSION()"
sudo -u postgres psql -d userside -A -t -c "SELECT PostGIS_full_version()"

Вы должны увидеть 16ю версию postgresql и 3.3.4 версию postgis. Может быть к тому времени, как вы будете читать эти строки, версия postgis будет более новой.

Теперь запустите службу FPM и зайдите в USERSIDE через браузер. 

sudo systemctl start php8.1-fpm

Так как другие службы остановлены, вы, вероятно, увидите ошибки связанные с ними, но при этом интерфейс USERSIDE должен открыться без ошибок подключения к базе данных. Если все успешно, то раскомментируйте закомментированные ранее строки в crontab и запустите внешние службы, находящиеся под управлением supervisor: 

sudo supervisorctl start all
sudo supervisorctl status

Удалить кластер БД старой версии, устаревшие пакеты и запасные резервные копии

Если USERSIDE работает корректно, ошибок взаимодействия с БД нет, то можно удалить старый кластер и пакеты. Вы также, по желанию, можете удалить аварийные резервные копии или подождать несколько дней, чтобы точно убедиться, что они не пригодятся. 

sudo pg_dropcluster 11 main --stop
sudo apt purge -y postgresql-11 postgresql-11-postgis-2.5 postgresql-11-postgis-3
sudo apt autoremove -y
sudo rm /backup/userside_emergency_11* /backup/postgres_config_emergency_11.tgz
sudo rm -rf /var/lib/postgresql/11/main
Источник — https://wiki.userside.eu/index.php?title=HOWTO:_Обновление_версии_PostgreSQL&oldid=17200