Cuanto tenemos lentitud al acceder a un servidor por SSH por IP, puede ser debido a la configuracion de DNS del archivo «/etc/ssh/sshd_config», que intenta conectar por DNS y no nos conecta hasta que da «timeout». Para solventar esta lentitud, debemos indicarle que no use DNS para conectar por SSH, de la siguiente manera:

añadir en:

 /etc/ssh/sshd_config 
UseDNS no