Внутри гостя (не на вашем компьютере, а внутри виртуальной машины) вам необходимо установить "Гостевые дополнения" для Virtualbox. Из руководства Virtualbox здесь смотрите этот фрагмент:
Интеграция указателя мыши
Чтобы преодолеть ограничения для поддержки мыши, которые были описаны в Разделе 1.8.2, "Захват и освобождение клавиатуры и мыши", это предоставляет вам полную поддержку мыши. У вас будет только один указатель мыши, и больше не нужно нажимать клавишу "Хост", чтобы "освободить" мышь от захвата гостевой ОС. Для этого в гостевой системе установлен специальный драйвер мыши, который взаимодействует с "настоящим" драйвером мыши на вашем хосте и соответственно перемещает указатель мыши гостя.
Вам не нужно загружать гостевые дополнения отдельно, они поставляются с Virtualbox. См. Ниже в той же ссылке выше для получения подробных инструкций по установке вашей гостевой операционной системы.