Router, repartir señal de internet sin WIFI

Hola, necesito conectar dos ordenadores a mi router, pero no puedo usar WIFI por que la señal no llega por la distribución de la casa, siendo el router multipuerto,¿puedo conectarlos por cable sin problemas? ó ¿hay otros sistemas para conectarlos?. Gracias.