我前夫是上门女婿，他来修了一个平房有九十多平，我们我们在一三年离婚后，我主动放弃房子享有权，有我儿子女儿，爸爸和前夫所有。没过多久他又重了一层，现在我们说复婚因为种种原因又没有复，在想复婚时我们装修了楼上，彼此都出了钱出了力，在讨论这层房子的问题了，本来女儿是段给他的，现在他又不要了，他还喊我拿十万块钱给他他就走人，请问我该怎么办