男女の性の違い

ちょっとお聞きしたいのですが、
主人との考え方の違いで悩んでます。
今は別居する寸前です。
昔、主人の遊びが激しくて、借金が数百万円出来て、
金利が高いので、風俗で働く？という話しになりました。
その時はあっさり行ってとの事で、少し働いたのですが、やっぱり無理でやめました。
その後、主人の趣味で、
複数の人と主人と一緒に居る状態で性行為しましたが（お互いです）、
私はやっぱり愛してる人には他の人と性行為して欲しくないので、
話し合いをして、数年は無くなってました。
私は暇な日には愛する人の為に、性行為の勉強して、
色んなSやMや、言葉攻め、セッティングしてきましたが、
マンネリ化してきたとか、刺激が欲しいとかで、
またスワップしたいと言ってきました。
「生でとか無しで、ネットなどでたまたまそういう人に会えはしよう」
と話ししてましたがその中で、「出来れば同じ人と何回もしたい」。と言ってきました。
私は同じ人と何回かしたら、なんか変な感じになるのではないか？
夫婦の関係と変わらないのではないか？
一回切りで連絡先消去とかの方がいいと話ししたのですが、
主人は同じ人としたかったようです。
元々マンネリ化してきたと聞いてたから、
すごく複数な気分になりました。
すごく考えてきたつもりでした。
主人に伝えてケンカになり、別居寸前です。
でも私はまだ愛してます。
やっぱり男の人は違うのですか？