今回はＳＭ的な内容からは離れ、表の世界（世間で言うところの社会通念的なこと）での私的な見解です、
ご不快な方スルーでお願いします。
・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・・
不倫や浮気は男女間の日常生活に存在して、社会的には「悪いこと」「いけないこと」と定義されていると思います。
既婚の人間が、他の異性と２人きりで会っていた場合に（場所・時間帯等から）外から見ている人間には それが「不倫関係」にあるのか「友達関係」にあるのかの区別がつないと思います。

例えば、貴方のご両親（家族の誰か）が他の異性と２人きりでレストランで（楽しそうに？）食事をしている、そこを見かけたらどのように感じられますか？

人によっては「ただの友達だ」と思うかもしれませんが、 私だったらなんだかイヤな気持ちになります。
間違っても家庭の食卓でこの話題をしゃべる事はできないでしょう。
本当に山の中で１人で暮らしているのであればなんの問題もないのですが、
それなりに社会の中で暮らしている以上は最低限のルールというものがあります。
成人して、定職に就き、結婚していればなおさらです。

　　とりあえず、
　１、２人きりでは会わない
　２、必ず相手(自分の恋人、配偶者)に伝える

　この２点が守れればギリギリ男女間の友情は成立しなくもないと言えるのではないでしょうか？
自分は間違った事をしていないという自分本位の考え方ではいけないような気がします。