今天有个顾客在我家买东西，是不退不换的，结果1个多小时以后回来了非要退，我跟他说只能调，他就一直跟着我，上厕所也跟着我，还威胁我说她有病，我就给她退钱了，我想问问他明天要是故意找茬来讹诈我，说因为这个事身体不舒服，我需要付责任吗