Podívejte se do nastavení TCP/IP síťového připojení na současně připojeném PC(*). Věřím, že tam bude přidělování IP a DNS automaticky. Pokud to tak je, modem/router je připraven obsloužit více počítačů a stačí opravdu jen vřadit mezi modem a počítače switch.

* Start/Nastavení/Síťová připojení/Připojení k lokální síti-Vlastnosti

pozn. Pokud tam máte nějaké hodnoty, napište jaké.