根据中国法律，父母与子女之间的关系是基于血缘关系，不能通过断绝关系来解除。即使双方同意断绝父子关系，这种协议在法律上也是无效的。父母对未成年子女有法定的抚养义务，无论父母之间的婚姻关系如何变化，都不影响父母对子女的抚养责任。 在您的情况下，如果您是孩子的法定监护人，您有责任照顾孩子的生活和教育。如果您是房子的产权人，您有权决定房子的使用和居住权，但这并不影响您作为父亲对子女的法定责任。如果您希望改变抚养权的安排，可以通过协商或法律途径解决，但断绝父子关系并不是一个合法的解决方案。如果双方有分歧，建议寻求法律专业人士的帮助，以确保孩子的权益得到妥善保护。