根据您描述的情况，岳父要求支付五万元作为带孩子的费用，并以不支付为由拒绝您带走孩子，这种行为可能涉及到家庭纠纷和对儿童权益的侵犯。首先，如果孩子是您的亲生子女，那么您作为法定监护人有权利与孩子团聚，不受任何人的非法限制。岳父无权以任何理由限制您与孩子的接触或要求支付费用。 如果岳父确实在照顾孩子期间产生了一些合理的费用，可以协商解决，但不应以孩子作为要挟。您可以首先尝试与岳父进行沟通，解释您作为父母的权益，并表达愿意合理补偿其照顾孩子的付出。如果岳父仍然坚持不合理的要求，您可以考虑寻求法律途径解决，比如通过法律途径申请孩子的监护权，或者向有关机关报告岳父的行为，寻求帮助。 请注意，处理此类家庭纠纷时，应尽量避免激化矛盾，保持沟通和协商，同时确保孩子的权益不受损害。如果需要法律援助，建议咨询专业律师获取更具体的法律意见和帮助。