言われた通り、Google-IME再インストールしたらMS-IMEを削除できました
ありがとうございました
あとはWindowsアップデートでのMS-IME復活だけ注意しときます