您好，我的大堂哥在侄子二周岁的时候去世了，侄子后来由我伯父伯母一直抚养，现在十八周岁了。他的母亲后来改嫁了，几乎没有尽到一点点抚养的义务。伯父有三个子女，去世的大哥，姐姐和小哥。请问应该怎样追究他母亲的责任？姐姐和小哥有没有抚养的义务？