根据我国法律规定，非婚生子女享有与婚生子女同等的权利。因此，您有权要求抚养自己的孩子，并且有权将孩子带离他们的住所。 然而，在处理这种情况时，请注意以下几点。 首先，您可以考虑联系当地的儿童保护机构或未成年人保护中心寻求帮助。 其次，可以尝试与孩子的父亲进行沟通，了解他的情况和态度，以便找到解决问题的方法。 最后，如果您认为孩子的父亲对您的安全和健康构成威胁，您可以考虑报警或者寻求其他合法途径来保护自己和孩子。 请记住，您的权益应当受到尊重和保护，无论遇到何种困难，都要坚持依法维权。