タスクトレーに同じアプリのアイコンが残留する

「Amazon Music アプリ」というアプリケーションを使っているのですが、このアプリを起動・終了するごとにタスクトレーにこのアプリのアイコンが残留してしまい、消すことが出来ません。

このアイコンが残っているという場所ですが、Windows10（home 1903）のウィンドウの下部のタスクバーの何も無いところを右クリックすると表示される「タスクバーの設定」--「タスクバーに表示するアイコンを選択します」をクリックすると出てくるアイコン群です。

通常はここでいわゆる「通知領域」に表示するアイコンを選択する為にON・OFFをするのですが、Amazon Music アプリのアイコンがとにかく凄い量で残っているわけです。

ここのアイコンを消す方法としてレジストリをいじり、

HKEY_CURRENT_USER\Software\Classes\Local Settings\Software\Microsoft\Windows\CurrentVersion\TrayNotify　の、

IconStreams　PastIconsStream　PromotedIconCache　の３つのキーをクリアーすればアイコン群はリセットされて不要なAmazon Music アプリのアイコンは消去されることは調べて有効な方法であることは把握しています。しかし当該アプリを起動・終了するたびに残留するアイコンを消去するためにこの作業をするのはなんとも不快です。

アプリの提供元であるAmazonにも問い合わせましたが、Amazonでは再現出来ず私の固有の環境が原因では無いかと回答され、Microsoftに問い合わせてみてくれ、それでAmazonの方に起因するということであれば再度報告してくれ、と。

しかし、別のPCで試しても同じ症状です。またAmazon Music アプリ以外のアプリケーションではこのようなことは起きていません。

何か解決のヒントはないでしょうか。