我有个店铺要转让，星期二的时候中介带了个女顾客来看房，当天就确定下来了，给了我定金1000元，并且写了张字条，今收某某女士1000元定金，但是我今天又不想转让给她了，中介说我需要付违约金给女顾客和中介自己，我并没有签合同我需要付违约金吗