根据您的描述，您与他人之间存在借款关系。您向对方提供了5000元，并将这笔款项存入了您的银行卡中，随后对方从您的银行卡中提取了5000元。现在对方要求您归还剩余的4000元（即9000元减去5000元），这个请求是否合理取决于双方签订的协议和法律规定。 如果您认为借款协议中有约定应偿还的金额为9000元，则您可以拒绝对方的要求并坚持按照借款协议中的条款执行。如果您认为借款协议没有明确指出应偿还的具体金额，或者协议中关于还款事宜的规定不清晰，那么您可能需要进一步了解借款合同或寻求法律帮助以确定正确的还款金额。 请注意，在处理此类争议时，请确保遵守当地的法律法规，并且保持沟通渠道畅通，以便能够解决任何可能出现的问题。如果可能的话，最好与对方进行协商，寻找一个双方都能接受的解决方案。