他当时追我的时候告诉我他是离婚的，包括到我家见我爸妈几其他家人时候都，说自己已经离婚，现在他前妻突然找上门说他们根本没有离婚，还说我是第三者插足，严重损害了我和我家人的声誉，我该怎么办