Het enige waarmee je de medegebruikers kan hinderen is met het feit dat ze zelf geen server op die poort kunnen opzetten. Inloggen vanop een andere computer achter die router op een externe ssh-server is geen enkel probleem.
Vanuit het punt van veiligheid kan het interessant zijn om voor een andere poort als de standaard poort te kiezen, maar dat is dan weer een ander verhaal.
En wat jij zegt van die verschillende poorten is zo gek nog niet, onderstaand verhaal kan op sommige gebieden misschien een beetje kort door de bocht zijn, maar in grote lijnen komt het opzetten van een verbinding met een website / ftp-server / ... op het volgende neer:
De poort die open staat 22 voor SSH, 80 voor HTTP, 21 voor FTP, 443 voor HTTPS, ... wordt gebruikt door de client computer om een verbinding aan te vragen. Over die poort wordt dan een andere, hoge poort, zoals bijvoorbeeld 13698 afgesproken om de rest van de verbinding over te laten verlopen. Die poort wordt door de router automatisch voor de duur van de sessie dan opengezet. Dit bij zowel de client als de server.
Het is dus ook zo dat eens je een connectie op die manier hebt opgezet er 2 tweerichtingsverkeer mogelijk is over die nieuwe, hoge poort.