您好！在您的情况下，如果双方已经就律师费用达成了一致，并且客户已经支付了相应的款项，那么您有权要求退还这部分律师费用。但是，请注意，在处理此类事务时，建议您保留所有的书面协议和通话记录等证据，以证明您与客户的协商一致以及付款的事实。 如果您需要进一步的法律指导或有其他相关的问题，请随时向我提问。