Das besagte Plugin macht nix kaputt, wenn du es wieder entfernst.
Ich benutze das bei BLogs von Freunden und Kunden auch öfters und hatte noch nie Probleme damit, weder beim Installieren noch beim Deinstallieren.
Die Ungewissheit ist aber, ob nicht irgendein anderes Plugin mit RoleManager kollidiert. Das kann man aber bei keinem Plugin ausschließen.
Nimm das Dingen ruhig!