Dos Proxys

Hola a todos, os comento mi problema:

Tengo actualmente en mi empresa la siguiente topología:

LAN - PROXY/ROUTER A - INTERNET

Mis clientes tienen como puerta de enlace y proxy la misma máquina
(PROXY/ROUTER A).

Ahora quiero añadir un segundo proxy (para hacer algunas pruebas y
sustituir
al actual algún día) pero no se muy bien como configurarlo (a él y a los
clientes)

Quedaría así:
LAN - PROXY/ROUTER A - INTERNET
PROXY/ROUTER B

¿Tengo que ponerlo y configurar a los clientes para que lo usen sólo como
proxy o también como Puerta de Enlace?

Estoy algo liado. Cualquier sugerencia es bienvenida.

Gracias,
ZIDAC