Tornar a aplicação resilitente a indisponibilidade momentânea do banco

[augusto-herrmann]

Instablidades na infraestrutura têm deixado a API indisponível, quando o banco cai. Mesmo após o retorno do banco, a API não retorna. Segue o log do banco Postgres:

2025-01-05 09:11:39.212 GMT [80] LOG:  database system was interrupted; last known up at 2025-01-05 03:05:04 GMT
2025-01-05 09:11:39.242 GMT [80] LOG:  database system was not properly shut down; automatic recovery in progress

A inicialização da aplicação da API falha se o banco não estiver disponível:

psycopg.OperationalError: connection failed: connection to server at "**.**.**.**", port 5432 failed: FATAL:  the database system is shutting down
(Background on this error at: https://sqlalche.me/e/20/e3q8)

ERROR:    Application startup failed. Exiting.

A aplicação precisa ter resiliência e tentar novamente se inicializar algumas vezes, caso o banco de dados não esteja disponível.