タイトルの通りHyper-Vの仮想マシンに接続できなくなるという謎な現象が起こっていました。
仮想マシンを起動すると確かに起動はして普通に動いてはいるようですが、「接続」を選択しても仮想マシンの画面が表示されないのです。
つまり、仮想マシンのネットワークの設定ができていない状態だと手も足もでないという絶望的な状況です。
色々調べた結果、こちらの記事が参考になりました。
結論として、仮想マシンへの接続画面が表示されない場合は
C:\Windows\System32\vmconnect.exe
を起動すると接続用の画面が表示されます。
※もちろんHyper-Vを有効化しておく必要があります。