私はAOS有効で使っていますが、IE11/Firefoxともそこまで不安定ということはありません。 ただ、IE11では少々動作がおかしいことがあり、一度AOSを無効→有効にするとそれ以降は直る、ということがサイトによってはあります。 同じサイトでも、Firefoxでは動作は問題ないんですよね・・・。
試しに止めてみるのもありかも知れません。私の場合はWindows Defenderは無効なので。