Supongo que ese router monopuerto va a sustituir al Modem USB. Creo que terminas antes y no te complicas si te compar un router con Modem ADSL. Tendrás 4 bocas para los PCs que quieras y si optas por un modelo inalámbrico, mejor que mejor.

Otra opción es mantener el router monopuerto y enchufarlo a un switch y conector los PCs a éste. Ésta es la opción más eficiente y barata. Un switch creo que ronda los 20-25 €.