根据我国相关法律规定，如果一方有邪教信仰，并且该信仰影响其行为能力或者生活态度，那么另一方可以依法请求人民法院撤销婚姻关系。但是，在这种情况下，需要考虑双方的实际情况以及孩子的最佳利益。因此，建议在决定是否要追究对方的责任时，应当全面考虑各种因素，并寻求专业的法律意见。同时，也需要注意保护自己和家人的权益，避免因处理不当而造成更大的伤害。