Зачем этим чертям мой маленький уютный сервер?
Боты. Поменяй порт.
и как их в этом максимально ограничить сохранив при этом удобство входа по логину/паролю? 
Написать правило, которое ограничивает вход с определенных IP