我爸出轨了，现在我和我妈知道他在外面至少有两个孩子，可是他不愿意和我妈离婚，但是也不肯给我妈钱，他的钱每个月都拿去给他的儿子和小老婆用，从以前开始他就到处借钱，身上背了巨额债务，在单位名声非常不好，我感觉我爸是想拖死我妈，然后让我和我妈来背这个债务，我就想问一下，有什么办法可以让我们摆脱这个债务吗，我们可以不要我爸的财产