Conectar rj 11 de telefono en clavija rj45

Hola adrianrg 
Pues sí, se podría conectar sin problema.
La diferencia entre un RJ11 y un RJ45 son el número de "pins" o hilos de cobre que usan los conectores
Si tu conectas desde tu router un cable telefonico a un conector hembra RJ45 en el medio (aunque sobre espacio a cada lado del conector), y en otro punto conectas otro cable telefonico en la misma posicion del conector RJ45, a un terminal de telefonia fija deberia funcionar sin problema.
La diferencia es que la linea de voz solo exige un par de cobre, y tanto en los RJ11 (4 hilos) como en los RJ45 (8 hilos) tienes mas hilos de los que necesitas (solo necesitas que tanto en origen como en destino los hilos que usas sean los mismos), pero ten en cuenta que esa instalacion de RJ45 debe estar aislada de cualquier otra entrada de señal (ya sea internet o señal externa telefonica)
Si tienes cualquier duda sera un placer ayudarte, ya nos contaras si lo pruebas, Un saludo! 🙂