Борисыч,
Не проще ли взять такую железку, всё время забываю как она называется, по сути является хабом для мониторов, мышей и клав, предназначена как раз для подключения нескольких таких устройств к одному системнику.