Internetforbindelse stopper op med jævne mellemrum

Jeg har fornyligt installeret 3 nye stationære DELL pc samt en IBM laptop derhjemme med følgende installeret:

Speedstrem modem 5100 (fra TDC)
Netgear GRW514 54mbs router (fra TDC)
ADSL 2MB/512KB

Den ene Dell bruger jeg til jobbet mens de to andre er mine børns til simple spil mm.

Alle er kablet til routeren men kører også trådløst (hvilket er nødvendigt for i hvert fald laptoppen).

Tidligere har dette kørt ok med kun 1 pc + laptoppen på. Men nu hvor alle 4 er kablet til routeren oplever jeg jævnligt at internet forbindelse stopper op 5-15 sekunder og går i tomgang inden den kommer igen. Er det modemet eller routeren som simpelthen er for svag/dårlig kvalitet? Og hvad vil I i givet fald anbefale at skifte til?

PS. Jeg forventer snart at opgradere min forbindelse så hvis jeg skal investere i en ny router/modem skal det ses i forhold til dette.