根据我国相关法律规定，父母离婚后，对子女仍有抚养和教育的权利和义务。在你的情况下，由于前夫已经去世，你应该有权要求他的哥哥归还房屋，并且有权与孩子的父亲共同抚养孩子。如果前夫的哥哥不配合，你可以考虑向法院提起诉讼，通过法律途径解决问题。同时，你也应该注意保护自己的权益，确保自己能够顺利地获得孩子的抚养权。