про свитч уже сказали
Еще вариант (неудобный но тоже имеет место быть), вставить в один из компьютеров (который будет включен во время работы второго) вторую сетевую карту (некоторые материнские платы и так имеют 2 ethernet порта), в настройках на этом компьютере объединить оба сетевых интерфейса в 'сетевой мост'.
В этом случае второй компьютер подключается напрямую через первый (через эту вторую карту), никаких других настроек не нужно, для софта поведение точно такое же как если бы оба компьютера были подключены через свитч.