Penso que só te safas se usares um dos pc como "router internet". Para isso tem que ter placa de rede e ter instalado o modem USB.
Neste caso a placa de rede alimentaria o interface de rede do router - penso que precisarás de um cabo cruzado - e depois liga o resto da rede ao router.
Caso sejam Winnoze

no interface USB tens que configurar como estando a partilhar a ligação com outras máquinas. A interface da placa de rede ficará com o IP 192.168.1.1 e com DHCP activo (para dar IP's à restante rede).
Neste caso tens que dar umas marteladas na configuração do router e das outras máquinas, mas que já dependerá muito do modelo que tenhas.
Resumindo com IP's:
USB - Rede internet
Placa LAN do PC - IP 192.168.1.1/mask 255.255.255.0
Interface WAN do router - obter por DHCP (será da rede 192.168.1.0)
LAN do router - rede 192.168.2.0/mask 255.255.255.0 gerida por DHCP
Placa LAN de PC2 - obter automaticamente/DHCP
etc etc.
No entanto isto é teoria...

Quando mudei de cabo para ADSL também tive o mesmo drama existencial e não consegui por o router a trabalhar. Chateei-me e comprei um router já com interface ADSL! Saía mais barato o router que as horas de trabalho que tava a gastar
