你好，根据我国相关法律规定，赠与行为是无偿的行为，并不需要出具书面证明。因此，你丈夫给对方的一万块钱属于赠与行为，无需归还。如果你认为该赠与行为损害了你的利益，可以要求撤销赠与或者请求返还财产。建议你在处理此事时寻求专业的法律意见，以便更好地保护自己的权益。