我是一个已婚女人，爱上一个已婚男人，并且他也爱我，就是各种束缚让我们无法在一起，我们该怎么办？