誰にも言えなくて困っています。

追加

忘れようと努力をしましたが無理でした。
会わないように連絡もなるべく取らないように
していたんですが最近向こうからちょこちょこ
連絡が来るようになって我慢していた思いが
溢れでてしまいそうで自分の気持ちをコントロール
するのが精いっぱいです。
誰か助けてください。

最終的にスレ主の望みはなんですか？

旦那さんと離婚したいってことですか？
親戚のお兄さんと再婚したいってことですか？

前者だけならわざわざ親戚のお兄さんが好きなので・・・なんて
旦那さんに言う必要はなく
ただ『もう愛してない。いや、最初から愛してなかった。離婚しよう』
って言えば済むことですよ
そこにわざわざ火種になるような情報は言わなくてもいいと思います

後者なら親戚のお兄さんはどう思っているのでしょうか？
お兄さんは結婚されていますか？
お兄さんはスレ主とよりを戻したいと思っているのでしょうか？
こちらは離婚とは違ってスレ主とお兄さん両方の気持ちが必要になりますので
まずはお兄さんのことを確認したらいいと思います

最後に
もしスレ主が旦那さんと離婚する覚悟もなく
ただ昔の恋心に引きずられて親戚のお兄さんとの思い出を美化してるだけなら
悪いことは言いませんから目の前にある幸せを感じてあげてください

まったくなんの気持ちもなく４年一緒に過ごすことなんてできないと思いますよ