Si vous pensiez vous mettre à l'abri des scans en déplaçant le port de votre serveurs ssh de 22 à 2222, vous avez tout faux. Tout le monde utilise déjà 2222. Prenez carrément des ports beaucoup plus élevés (hé... vous pouvez aller jusqu'à 65535 !), et surtout n'oubliez pas: Installez fail2ban !
(ou encore, connectez-vous avec des certificats et désactivez les mots de passe.)