Да, но поскольку вы соединяете два компьютера напрямую, вам, скорее всего, понадобится «перекрестный кабель Ethernet».
Перекрестный (или «x-over») кабель Ethernet имеет несколько иной набор внутренних соединений, которые обычно не нужны между компьютером и маршрутизатором.
Тем не менее, лучший способ - это приобрести небольшой 5-портовый (или 8-портовый, потому что он часто стоит всего несколько долларов) коммутатор Ethernet и подключить один из его портов к вашему интернет-маршрутизатору (я полагаю, к вашему "Boxee Box") с перекрестный кабель (с более новыми коммутаторами Ethernet это часто не требуется, так как они автоматически определяют необходимость перекрестного переключения и соответственно настроятся), затем подключите все ваши компьютеры к этому маленькому коммутатору Ethernet.
Проблема с совместным использованием подключений заключается в том, что вы становитесь зависимыми от того, что этот компьютер для совместного использования подключений всегда будет доступен, когда он вам нужен, что может быть не так удобно (хотя это решение также будет работать).