我的奶奶有四个儿子一个女儿，老大在我出生2年后过世，我爸是老二，我奶奶20多年一直由我爸爸抚养，最近奶奶身体不好。他们就来争夺房子，这么多年来他们没有尽过赡养老人的义务，有没有可能不给她们分房子