律师，您好！我是2008年买的商品房，当时楼下停车位自由使用，不收费。2020年10月，小区物业将绿化带规划成停车位，让业主租停车位。因为这几年我在外地居住时间长，物业曾经提前问我是否租借停车位，我没有多想，回复说不要了。我楼下的业主以我的名义交六年租金。现在，我考虑自用或将来卖房需要，想要回我的车位出租使用权，以我名义租车位的邻居，不同意，我该怎么办？