Soweit ich das jetzt beim überfliegen deines Posts gesehen habe, passt alles.
Wenn du an der sshd_config bastelst, dann lass dir ein Terminal Fenster offen und teste mit einer neuen Verbindung ob alles klappt. Falls nicht, kannst du dann mit der noch bestehenden, die Config wieder...