债券债务问题，家里的弟弟去年像高利贷公司贷款1万元，约定1个月归还，当时扣除利息4千。一个月以后未能归还，高利贷公司来人威慑之下又这下可4万的条子，现在高利贷公司要求归还共计5万元整。现在所有条子都只有一份且在对方手里，我方无任何有力证据，打官司能赢吗？