17年10月我爱人通过链家和买家签订了房屋出售合同，约定分三笔支付50万首付，第一笔是6万，2万转账，4万欠条，到约定日期买家未继续支付，并通知我们没有买房资格，想解除合同，合同上约定的违约责任是20%房款，买家自述，和中介说过她的情况，中介承诺可以解约。但是我爱人于11月因颅内肿瘤生病住院，手术后出现并发症去世。请问专家律师，我是否可以继续追究买家的责任，以及买家需要承担多少违约金额。