Problème routeur avec numericable

Bonjour tout le monde.

J'ai un petit pb et j'espere que qqn saura y remédier...

Pour commencer :
-1 PC fixe (windows)
-1 PC portable (windows)
-1 modem numericable branché en ethernet
-1 routeur D-Link DI-524
-1 clé wifi : D-Link DWL G122

Voila ce que j'ai.
Internet est branché sur le modem.
le modem est branché sur le routeur.
le routeur est branché sur le portable.
la clé wifi est branchée sur le fixe.

A l'installation, tout marche bien, le fixe et le portable ont internet.
Si j'éteind mon portable, le fixe en wifi marche et il y a internet.

Par contre, si je debranche mon routeur et mon modem et que je les rallume, probleme.

Quand j'allume mon pc fixe en wifi, tout "à l'air" de marcher, connexion excellente et tout et tout par contre qd je vais ds mon navigateur internet je n'ai pas acces à internet.
il faut que j'allume mon portable et que je lance internet pour que ca remarche sur le fixe.

Et ca me pose un pb car en fait je ne branche mon portable que pour l'installation, le pc qui doit servir est le fixe en wifi. Donc si a chaque fois que j'éteind mon routeur, il faille que j'allume mon portable, c'est assez lourd.
Et j'ai fait comme ça car je ne voyais pas comment tout installer sur un meme pc.

J'espere que vous m'avez compris.
Please help me, ça fait une semaine que je suis dessus et je ne vois pas du tt comment faire.

Merci a vous...