根据我国刑法的规定，对于因工受伤或者工作原因导致的伤害，如果受害者家属没有证据证明工人是在故意伤害行为中死亡，则应当认定为工伤。因此，在这个案例中，如果警方确实认为死者是由于意外事故而死亡，并且没有其他证据证明工人是在故意伤害行为中死亡，那么你父亲可能会被排除在刑事责任之外。 然而，需要注意的是，具体处理这个问题还需要考虑多个因素，包括但不限于案件的具体情况、法律规定以及相关司法解释等。因此，建议你尽快与专业的法律顾问进行详细咨询和讨论，以便获得更准确的解答和指导。