На самом деле ни одно из этих решений не работало, так как моя способность удалить через Extension Manager была отключена, и VisualSVN не появился в моем списке программ через панель управления. Даже после использования Revo Uninstaller, чтобы найти его в моем списке программ, удалить его не удалось.
После нескольких дополнительных исследований я нашел эту тему. По сути, вы должны запустить VS2010 от имени администратора (щелкните правой кнопкой мыши значок приложения, затем выберите "Запуск от имени администратора"). Только тогда кнопка "Удалить" появится в Extension Manager, и вы сможете ее удалить.