你们两个人没有结婚证，也就意味着不存在离婚的问题，你们两个人最多算分手而已，这是道义上的问题，和法律没有关系。你可以以子女的名义，起诉这个男方，要求男方承担抚养义务，也就是要他支付抚养费，至于他在外面借的债如果没有你的签字或认可，不需要承担

你们不是夫妻，不需要办理离婚手续，他借钱你可以不还，孩子抚养费男方要承担

1、没有结婚证，不用办理离婚手续，分开就行了；2、他借的贷款他自己还。3、孩子抚养权归属你们自已协商，如协商不成，由法院判决。