我爱人是哥俩，北京人，26年前我们从东北回北京的家，当时兄弟住在父母房，我们回来就住在兄弟分的房子，(父母和兄弟都是一个单位)一住就是20多年，而且单位房改时都买下来了，当时兄弟同意我出钱加他的工令买下来的，只是房证名字没改过来。一住20多年现在这个房子在四环以外，现在置450多万了。兄弟现在想要回去交单位换一套大房子，我们同意，不知道买房子的钱怎样退还我们。