Installer son propre réseau. (bis...)

Bien le bonjour, cher internautes. Quel plaisir de revoir une fois de plus ce forum d'entraide que j'apprécie tant.
J'ai actuellement fait l'acquisition d'un troisième ordinateur dans mon domicile, il va falloir que je le boost un peu en ram, mais ce n'est pas le sujet. En effet, possédant une connexion ADSL Neuf, je souhaiterais pouvoir me connecter sur internet depuis ce nouveau PC. Malheureusement, ma 9 box (modèle sagem pas sûr ) ne dispose que de deux sorties pour cables RJ45. Ayant comme système d'exploitation Windows XP sous SP2 pour chacun de mes p'tits PC, je souhaiterais savoir quel est le meilleur moyen d'obtenir une connexion pour ce dernier ordi.

Je vous vois arriver d'ici : il me faut créer un réseau local. Justement, bien que je connaisse quelques trucs en info, je suis pas casé là dessus. Alors que me faut-il ? Un routeur simple ? Quel modèle ? Le prix est-il élevé ? La configuration d'un réseau local entre les ordinateurs est-elle complexe ?
Tant de questions énigmatiques pour ma part, qui n'attendent que vos réponses si précieuses !

Cordialement,
Yoshipower.

(Désolé si ce post est un doublon y'a eu un bug chez moi je sais pas si vous voyez le premier ou pas !)