我们买了一套二手房，当时以卖方定的48万的房款签的三方协议及买卖合同，卖方要求我们提供十万定金并不算入总房款内，待卖方收到房款后将十万定金归还我们，现在过户完快两个月了，银行也已经房款了，卖方以各种理由搪塞推脱不将定金归还，中介联系卖方，卖方以房价上涨，他吃亏等理由，未直接说明但透露出要求我们给他补差价的意思，我现在能不能起诉他