我和另一个男生订婚，原本我是不想那么早，但是他对我说他奶奶不行了，我就在想，早订婚晚订婚都差不多，所以就同意了，然后之后因为彩礼没谈好对方不愿继续，现在民事诉讼我赔偿他订婚的花销，到处诋毁我的形象，我想问一下我是不是我可以拒绝赔偿