Hjælp til opsætning af router og switch

Min router (D-link DI-604) er tilsluttet 4 computere.
For at kunne uploade på alle 4 har jeg været nødsaget til manuelt, at indtaste ip-configuration i hver computer.
Og det virker ganske udemærket.
Nu vil jeg så gerne ha` min netværks-printer (Xerox Phaser 6200DP) og et par computerer mere på mit netværk og derfor har jeg købt en 5 ports switch.
Routeren kan vel ikke se switchen, så hvordan med opsætning af ip-configuration for de computere/enheder som er tilsluttet switchen ???