Buenas JoshLozano
Pese a mitos y leyendas urbanas, en principio la latencia no tiene ningún tipo de relación con ello. La latencia que tienes en esencia es el tiempo que tardan tus paquetes al destino, y tienes respuesta de estos. Que exista un puerto abierto más o uno menos, no va a hacer que los paquetes vayan más rápido o más lentos por la red, piensa en ello.
Es cierto que esto no es una verdad absoluta. Si bien es cierto que un puerto no puede directamente ni mucho menos mejorar la latencia, pueden existir escenarios muy concretos donde al no abrir un puerto que debería de estarlo, se requiera realizar una conexión indirecta que de nuevo teóricamente pudiese inducir una mayor latencia. Pero repito, que no sea una verdad absoluta porque pueden existir servicios/aplicaciones/escenarios muy concretos donde indirectamente podría afectar, no significa que se tome como algo realista.
Así que a efectos generales, no, esto no tiene ningún impacto realista en la latencia. Más bien en si te funcionan bien todos los servicios de la aplicación/juego/servicio. Es más, la mejor forma de comprobar la latencia real es con herramientas tipo WinMTR, y como verás no requiere ningún tipo de puerto ni de otras historias, solo un destino.
Saludos.