Как сделать сертификат для второго сервера?
На сервер2 ставите nginx и делаете proxy_pass на сервер1. DNS должен указывать на сервер2, и ssl-cертификаты для домена должны стоять на нём же. Трафик между серверами можно шифровать хоть самоподписными сертификатами.
Сертификат выдаётся для домена. Если оба сервера обслуживают один и тот же домен - копируйте его на оба сервера. Ну и proxy_pass со второго на первый, конечно.

Если домены разные - делаете под них сертификаты, и копируете на соответствующие сервера, логично же. Хотя нет, на первом сервере сертификат со второго тоже нужен, файлы то на нём.