Si, come dice Kru è possibile.
Prima cosa il cavo ethernet cross (RJ45 incrociato)
Per procedere manualmente devi:
nelle proprietà delle schede di rete dei pc devi assegnare gli indirizzi IP:
Es:
Il pc con connessione a internet avrà
Ip: 192.168.1.1
Sm: 255.255.255.0
Il pc "client"
Ip:192.168.1.2
Sm: 255.255.255.0
Gw:192.168.1.1
Dns1: 192.168.1.1
Ora sul pc con la connessione a internet dovrai condividere la connessione. e questo lo fai o nelle proprietà della scheda di rete, o nelle proprietà della connessione che hai (es. Alice adsl o connessione a Tiscali, Virgilio, ecc)
Tasto dx -> proprietà -> condivisione connessione a internet -> permetti ad altri pc di utilizzare la connessione (flag da mettere)
C'è anche un'altra flag da mettere che è "permetti di attivare e disttivare la connessione" questa è a tua discrezione ma te la consiglio.
Da questo momento dovrebbero navigare entrambi.