Es bien facil la configuracion de esa red aqui te va
CONSIDERANDO QUE TENES TURBONETT
Asigna Ip estaticas a cada una de las maquinas de la red Ejemplo
Panel de control >>>> RED>>>TC/IP>>>Propiedades
Maquina 1 (CONFIGURACION)
ip = 192.168.1.25
Mascara de Subred = 255.255.255.0
Puerta de Enlace = 192.168.1.1
DNS primario = 168.243.165.225
DNS secundario = 168.243.165.226
y asi sucesivamente en todas las maquinas lo unico que cambiara sera la ip de la maquina luego el router lo puedes conectar en el swich o lo conectas a un punto de red y de ahi sacas del mismo router la coneccion hacia el servidor que me imagino que es la que tu usas eso es todo......ya tienes internet en la red sin proxy....
OJO las ip estaticas tienen que estar en el rango de 192.168.1.XXX