我是房东，房子租给了中介，当时合同签的是5年，所以让了他3个月的房租，房子原来是正常的自己住的房子，什么都有，只是旧了一点，他当时把我的房子重新简装了一下，把我的东西都扔掉了，现在是第三年刚开始，他要提前违约，不愿意给我违约金，或者给违约金的话就让我赔他的装修折旧费，我想知道这样合理吗