房屋纠纷，早年长辈同情他的兄弟，说临时换房把自己的房子过户人家的名字，后来想过户回来，但是长辈的兄弟死了，现在兄弟的子女不仅不愿意过户。还告了我们家，因为我家目前把这个房子租出去了，几十年的房费一直是我家承担。当时过户没有什么法律依据协议，我家的长辈和他的兄弟均过世，我家仅有目前几十年缴纳房租的凭证。但房子是那个死去兄弟的名字。这种情况是否百分百败诉？如果败诉可能我家要承担什么损失？