我的父亲曾服刑出狱后，现60多岁无业在家，经常赌博，并向邻居借钱。与我母亲早年离异，现与继母也处于离异状态，两人同居一屋，经常趁我继母来帮忙带小孩时，私自带外来妹回家行苟且之事。借了邻居朋友的钱均有借条，非赌债，已由我继母还款，约2万多。想知道如何能防止父亲伤害我的继母和家人，拖累全家。