Detta är fullt möjligt, det enda du behöver är dela via ethernet, som du nämnde ovan.
Jag har endast testat detta med min Mac, men jag har sett guider om hur man delar ut med windows, och det mesta finns säkert att hitta efter en googlesökning.