Normal, vu d'internet, tout ton réseau ne peut être "vu" que part une adresse IP, celle de la machine ayant le modem.
Il y'a donc une manip à faire. Dans un clickodrome genre Windows, ça doit s'appeler "partage de connexion internet". Sachant que d'un point de vue technique, il faut faire du NAT, translation d'adresse : en gros, quand cette machine fait suivre vers internet un paquet de ton réseau, il mets son adresse comme source, et fait la manip inverse pour les réponses.
Pour savoir comment faire, je laisse les habituer de Windows te répondre (car je suppose que tu es sous Windows comme beaucoup ici).