你好！根据合同法的规定，定金的数额不得超过主合同标的额的20%。因此，如果你想要退还别墅，那么你必须在不违反法律规定的情况下与卖方协商解决，并且确保你的行为不会给对方造成损失。如果卖方不同意退还部分或全部定金，你可以考虑通过法律途径解决问题，例如申请仲裁或者向法院提起诉讼。希望这些建议对你有所帮助。