五年前，我们四个人通过我们四人中的一个人向他的朋友借了10万元钱，借钱到现在始终没有见过给我们借钱的人，也没有直接给借钱人当面签署协议。都是我这个朋友让我们（包括他在内）写的借条，当初是承若借10万，返还20万，后来又是同样的手段让写返回30万。当初10万元也是这个朋友给的。这其中存在借钱人不存在虚假的问题。这个事情该怎么处理呢？