設定(時刻と言語>言語>キーボード>入力言語のホットキー>テキストサービスと入力言語)で、「Caps Lockキーを解除する方法」と言う選択がある。
デフォルトではCapsLockキー、つまり、トグル操作になっているのだが、これを、「Shiftキーを押す」に変えてやる。
これで、キー入れ替えでCapsLockを無効(CTRLに変更)にしても、Win10の最新版で、日本語入力ツールバーにCAPSのアイコンがなくとも、大丈夫。いやはや、数年間、悩まされた。
特に、Windows10(v21以降)では、キーボードIMEのツールバーに「CAPS切替」のアイコンが無くなってしまったので、再起動しか手が無くなっていた。