jajajaja
Puede que el switch no sea necesario si tu router tiene mas de una salida (si, hay routers que solo tienen una salida

) y tenes menos de 4 computadoras... (los routers por lo general no traen mas de 4 salidas)
Por en el caso que tu router tenga al menos 2 terminales, simplemente conecta con un cable plano (osea, no crusado) a la otra terminal.
Si tu router solo tiene una salida y no hace la conversion de ADSL (no le conectas la linea de telefono a el, porque segun comentas tenes un modem para eso), tendrias que conectarlo así:
Internet -> Modem -> Switch - PC1 ^ PC2