職場の既婚女性と数回飲みに行き、その関わりの中で、その女性の発言から、「なんか違うなこの人」と感じることが何回かあり、直ぐに離れようとしましたが、ずるずると会う回数を重ねるごとに、最終的に最後まで行きました。ですが、その1回だけであり、何度も友達になろうと言い続けていたので、今は、友達です。
私の中に、まだ甘えたいという気持ちがあり、１か月間会うのやめよう！と言ったら、同じ職場の男性に切り替えたようで、あっさりしたのもでした。ただ、友達でいようと言い続けたので、向こうも純粋にリセットして友達になっている状態です。
不倫関係を続けていたとしても、罪悪感に苛まれ、やめても、「もう少し付き合っとけばよかった」などと後悔に近い感情に悶々としております。職場の人も何となく、不倫のこと、他の男性に切り替えたことを知っている感じです。僕には言いませんが。

僕が抱えている感情の要点
①不倫相手という好きになってはならない人との関わりの中で苦しみ苛まれ関係を持った結果、友達でいようと言い続け、1か月会わないでいようと言ったら、新しい職場の男性に切り替えたことに対するやるせなさ！
その女性も友達でいようという言葉と、僕の方から、相手に、あなたが私を吹っ切ってくれ！私からは切れないから！といった言葉に従ったまで！
そして、相手は本当に友達というスタンスを保とうとしています。

分れようが別れまいがどっちみち苦しんだことに変わりはない。
ただ、同じ職場なので辛いです。
なにか、良きアドバイスがありましたら、よろしくお願いします。
文章が分りずらいと思いますが、よろしくお願いします。