我爱上一个有家庭的男人，而且他也爱我，但是我们不能在一起生活，他说要一辈子保持联系，这个合适吗