Здравствуйте, Уважаемый автовладелец!
Из описания не совсем понятно какой именно "шарик". Желательно прикрепите пожалуйста фото.
По всем признакам причина в повреждении привода переключения передач, а где именно и как его устронить можно сказать только после проверки.
Россия, Subaru Legacy